Esta fue la última residencia de Jean-Bernard Xavier Philippe de Marigny de Mandeville, tal como era el nombre completo de Bernard de Marigny. Fue jugador, playboy, desarrollador, político y duelista. Se lo describía como guapo, educado, generoso y arrogante. Él descendía de la nobleza francesa, ya que su bisabuelo fue el primer comandante de los soldados franceses estacionados en Nueva Orleans. Sus antepasados se encuentran entre los pocos que están enterrados en la Catedral de San Luis. Cuando su padre murió, Marigny heredó $ 7.000.000, una gran fortuna en esos días, por lo que estaba entre los hombres más ricos de América. Pero existe el mito en Nueva Orleans de que Marigny murió en la pobreza, después de haber desperdiciado su gran fortuna en sus hábitos de juego. La verdad es que, si bien Bernard perdió mucho dinero en el juego, también fue víctima del pánico de 1837, una crisis financiera que destruyó la nación. Finalmente tuvo que vender la casa de su plantación y alquiló dos habitaciones en este edificio.