Ragged Point ligger i nordvästra San Luis Obispo County på 35°45′35″N 121°19′40″W / 35.7596892°N 121.3277061°WKoordinater: 35°45′35″N 121°19′40″W / 35.7596892°N 121.3277061°W, cirka 11 km norr om Piedras Blancas Light Station. Den klippiga udden markerar den södra änden av den lilla vik där San Carpoforo Creek mynnar ut i Stilla havet. Det finns en kort strand strax norr om utskjutningen som kallas Ragged Point Beach, som skiljs av en klippa från San Carpoforo Creek Beach och San Carpoforo Creek Trail. Området runt Ragged Point är hemvist för olika former av djurliv, bland annat elefantsälar, havsuttrar och fåglar som den västra snöplundraren.
I området ligger Ragged Point Inn and Resort, som inte ligger på själva udden Ragged Point utan snarare 2,9 km norrut på Highway 1 i en liten bygd som också kallas Ragged Point. Resorten byggdes av Wiley och Mildred Ramey med början i slutet av 1950-talet på en fastighet som tidigare var en del av Hearst Ranch. Den moderna anläggningen innehåller ett hotell, en restaurang och bröllopsfaciliteter och ger tillgång till Young Creek Beach, en svart sandstrand som man når genom en brant vandring nerför en 120 meter hög klippa.