Il museo è stato allestito nel 1903 nell'ex palazzo di Rohan-Guéménée, costruito all'inizio del XVII sec. e dove Hugo visse dal 1832 al 1848, scrivendovi in particolare Ruy Blas. I lavori di riqualificazione prevedono un nuovo percorso di visita, l'accesso al giardino e una sala da tè.