’occupation du site de la maison de Passy est attestée dès le Moyen Âge, bien avant l’arrivée de Balzac qui occupa une partie de cette maison de 1840 à 1847. Des fouilles réalisées en 2002 ont montré que les caves englobent des habitats troglodytiques de la fin du Moyen Âge - les seuls connus à ce jour à Paris -, quand Passy n'était qu'un village peuplé de cultivateurs, de vignerons et de carriers.

Sous l'Ancien Régime, les coteaux sont transformés en terrasses où de modestes maisons côtoient des hôtels particuliers luxueux, transformés après la Révolution en immeubles de rapport. Balzac loue dans la dépendance d'un hôtel situé au 47 de l'actuelle rue Raynouard, en octobre 1840, un appartement composé d'une salle à manger, d'un salon et d'une chambre à coucher pourvu d'un cabinet, avec jouissance d'une cave et du jardin.

Après son annexion par Paris en 1860, Passy s'urbanise et le village devient au XXe siècle l'un des beaux quartiers de la capitale. La maison de Balzac offre aujourd'hui le dernier témoignage des coteaux de Passy, tels qu'ils se présentaient sous l'Ancien Régime et au XIXe siècle. En 1908, un homme de lettres, Louis Baudier de Royaumont sauve la maison en y installant un musée dédié à l'écrivain, devenu musée municipal en 1949.

La Maison de Balzac s'étend aujourd'hui sur trois niveaux entre la rue Raynouard et la rue Berton ; elle englobe l'appartement en rez-de-jardin ainsi que diverses pièces et dépendances occupées à l'origine par d'autres locataires.