En février 1809, Sophie Hugo, la mère de Victor, vient s'installer à Paris, alors que le père demeure en Espagne, au service de Joseph Bonaparte. Elle trouve un vaste appartement au rez-de-chaussée du couvent des Feuillantines, fondé par la femme de Louis XIII, Anne d'Autriche, au numéro 12 de l'impasse du même nom. Victor Hugo adulte parlera souvent de cet endroit dans ses œuvres, et notamment dans Le Dernier jour
d'un condamné : « Je me revois enfant, écolier rieur et frais, jouant, courant, riant avec mes frères dans la grande allée verte de ce jardin où ont coulé mes premières années, ancien enclos de religieuses que domine, de sa tête de plomb, le sombre dôme du Val-de-Grâce.»