Come suggerisce il nome, le case vittoriane furono sviluppate durante l'epoca vittoriana (1849-1915). Si dice che la città ne avesse ben 48.000, ma molte furono distrutte dal terremoto del 1906 e dal successivo incendio, soprattutto nel quartiere di Nob Hill. Altre 16.000 furono demolite durante la Seconda Guerra Mondiale, molte delle quali furono utilizzate per scopi militari. Oggi ne rimangono 14.000, soprattutto nei quartieri di Alamo, Haight Ashbury, Russian Hill e Castro.
Lo sapevate che? Le case vittoriane sono anche chiamate Painted Ladies, dal libro "Painted Ladies - San Francisco's Resplendent Victorians" di Elizabeth Pomada e Michael Larsen.