Huset som guvernörsfamiljen Ulrich bodde i byggdes på 1700-talet och finns fortfarande kvar. Det är typiskt för staden Gustavia med en bottenvåning i sten och en lättare övervåning byggd i trä. Ungefär som ett så kallat landshövdingehus i Göteborg.
Edla Ulrich skriver om husets interiör:
"Salongen i guvernementshuset, sedd från soffan i midten af galleriet. De gröna jalusidörrarna i fonden höra till matsalen och dess öppna dörr till gården. Den vägg som der synes är badrummets och de gröna löfven vinrankor som med sin spalier bilda ett slags tak till gården. De öppna dörrarna till höger äro till sängkammaren, den till venster till lesrummet."