Χτισμένο κατά τη δεκαετία του 1660, από τον Άγγλο μεγαλέμπορο και πρόξενο της Αγγλίας στη Ζάκυνθο της εποχής Robert John Geoffrey, παραχωρήθηκε κάποια χρόνια αργότερα στον γαμπρό του, επίσης Άγγλο, Robert Sargint. Την εποχή της Αγγλικής Προστασίας (1814-64) το κτίριο, προφανώς λόγω της καταγωγής των ιδιοκτητών του, χρησιμοποιήθηκε ως έδρα του Άγγλου διοικητή του νησιού (Resident), με αποτέλεσμα οι Ζακυνθινοί του καιρού του να το γνωρίζουν ως «Ρεζιντέντσα» (Residenza). Όταν μάλιστα ο μεγάλος Άγγλος πολιτικός Gladstone επισκέφθηκε το νησί, μίλησε από το μπαλκόνι του αρχοντικού στους συγκεντρωμένους Ζακυνθινούς, που απαιτούσαν την Ένωση με την Ελλάδα, γεγονός που αποτυπώθηκε σε γνωστό σατιρικό ποίημα του Γ. Τσακασιάνου.
Αγοράστηκε από τον Αλέξανδρο Ρώμα το 1880 και έκτοτε αποτελεί έδρα της οικογένειας. Από το 1880 και μέχρι τον Β’ Παγκόσμιο πόλεμο το οίκημα αποτέλεσε και την έδρα ενός από τους δυο μεγάλους πολιτικούς σχηματισμούς του νησιού (Ρωμιάνικου Κόμματος). Το οίκημα πέρα από την ιστορική του βαρύτητα για την σύγχρονη ιστορία της Ζακύνθου αντιπροσωπεύει και το μοναδικό δείγμα αρχοντικού-μεγάλης αστικής οικίας- που έχει απομείνει στην Ζάκυνθο μετά τους σεισμούς του 1953.