Dagens hovedbygning ”Husmorskolen” er bygd i 1856, men husets kjellere er mye eldre. Den østre delen er fra Nettolhorst tid, tidelig 1600 tall og den vestre delen er 100 år yngre.
Jens M. Golden kjøpte Berby på auksjon i 1892. Hovedbygningen var da kun delvis innredet. Da Smaalenens Amt så seg om etter husvære for å etablere en Praktisk jenteskole ble denne skolen lagt til Berby. I 1899 ble Smaalenenes Amts Praktiske jenteskole opprettet på gården. Kursets varighet var 11 måneder og 20 elever fikk plass. I 1909 ble skolen utvidet til å kunne ta i mot 30 elever. I årene 1908 til 1910 huser også gården den praktiske delen av lærerinneutdannelsen som senere ble Statens lærerskole i husstell på Stabekk.
I 1901 opprettes landets første hagebruksskole for kvinner - Berby hagebruksskole, i denne forbindelse ble det gartneridrift på gården. Hagebrukskolen ble nedlagt i1939.
I 1919 sier Jens M Golden opp leieavtalen med fylket og Den praktiske jenteskolen flytter til Lennsmannsgården på Idd og får navnet Østfold Husmorskole, i dag Halden videregående skole Risum.
Jens M Goldens yngste datter Alette blir med på lasset til Risum som bestyrinne. Alette Goldens drøm var å starte sin egen husmorskole i Oslo. I 1927 ble Alette Goldens Husmorskole i Werglandsvegen 1 satt i gang. 9. april 1940 ble huset som husmorskolen var i tatt av tyskerne og skolen måtte ut. Året før i 1939 var Berby hagebruksskole nedlagt, lokalene stod tomme og Alette Golden flyttet skolen til Berby. I august 1940 var skolen igjen i drift. Denne private husmorskolen ble nedlagt i 1952.
I dag står skolen uberørt, dvs. at ingenting er forandret siden 40 tallet, og Husmorskolen fremstår som et unikt kulturminne.