Nob Hill est un quartier aisé où résident les grandes familles de San Francisco, si bien qu'il est parfois appelé « Snob Hill ». Les avantages de la colline (situation centrale et vue panoramique) accélérèrent son urbanisation à la fin du XIXe siècle : elle se couvrit de demeures luxueuses parmi lesquelles celle de l'homme d'affaires et gouverneur de la Californie Leland Stanford (1824-1893). Nob Hill est souvent cité dans les Chroniques de San Francisco d'Armistead Maupin. La cathédrale a été édifiée au début du XIXe siècle. Le quartier fut complètement détruit par le séisme de 1906 : si beaucoup de maisons furent reconstruites, d'autres propriétaires décidèrent d'investir dans d'autres quartiers situés à l'ouest comme Pacific Heights ou Cow Hollow.

Le quartier de Bayview, dans le sud-est de San Francisco, s'étend le long de Third Street au sud d'Evans Avenue, à l'ouest du quartier d'Hunter's Point. Bayview est l'un des quartiers les plus pauvres de la ville, à la population majoritairement afro-américaine, et le siège de fréquentes violences urbaines.

Entre 1995 et 2001, SoMa (abréviation de South of Market) fut un lieu d'accueil pour le boom économique et immobilier. Jusqu'aux années 1940-1950, South of Market était un quartier d'entrepôts et d'ateliers. Il accueillait une population de marins, d'ouvriers et de travailleurs qui logeaient dans les maisons de style victorien des ruelles. La conversion des quais de l'Embarcadero dans les années 1950 provoqua l'afflux d'une nouvelle population d'homosexuels et de marginaux. Ceux-ci s'opposèrent longtemps aux projets de la municipalité de refonte du quartier dans les années 1970. Avec l'épidémie du SIDA dans les années 1980, la mairie décida de fermer les saunas gays et de contrôler les bars de la communauté. Entre 1995 et 2001, SoMa fut un lieu d'accueil pour le boom économique et immobilier.

Il s'agit des beaux quartiers de San Francisco : de somptueuses villas y ont été édifiées à partir du XIXe siècle. Par exemple, on peut voir une magnifique demeure de 16 pièces construites sur les plans de l'architecte Frank S. Van Trees en 1899. Certaines de ces maisons ont survécu au séisme de 1906 et ont une vue sur l'océan Pacifique grâce à des oriels en demi-cercle. Au pied des Pacific Heights se trouve la Marina où s'était tenue l'exposition Panama Pacific International de 1915. La Broadway Street est surnommée la grande allée blanche et fut dans les années 1960 le berceau de l'érotisme.

Polk Gulch est la partie commerciale de Polk Street, qui s'étend approximativement entre California Street au nord et Geary Street au sud. Ce quartier étiré est bordé à l'est par le pied de Nob Hill, approximativement Hyde Street, et à l'ouest par Van Ness Avenue. Comme le Tenderloin voisin, c'est un quartier souvent défini par la prostitution (notamment de la part de transsexuels) et le trafic de drogue. L'association des commerçants du quartier a lancé en 2006 une campagne visant à promouvoir une nouvelle identité pour le quartier, Polk Village.