Højskolen i Fårevejle Stationsby på Adelers Allé 127, er et af Søren Bays mest fotograferede bygninger. Dette kort er et privatfoto af Bay, fra 1913, hvor der gøres klar til udflugt. De mange motiver kan måske have noget at gøre med, at der faktisk blev holdt to indvielser af højskolen! Ved den første indvielse d. 3. november 1907, var nordfløjen ikke helt færdig. Da det første hold startede 3. maj 1908, blev der holdt endnu en indvielsesfest. Nu stod det hvide slot, som bygningen blev kaldt, færdigt.
Højskolen skulle være for de unge mennesker fra de indre missionske familier. Skolen skulle være et alternativ til de grundtvigske højskoler. Den første forstander var Janus Andreasen. Andreasens ønske var at tilbyde mange forskellige kurser til egnens lokale beboere. Typisk var det vinterkurser for karlene og sommerkursus for pigerne. Også korte kurser helt ned af en uges varighed var der stor opbakning til. Flere forstandere kom til, og bidrog med nye former for kurser gennem 1920 og 1930´erne. I 1943 blev højskolen taget i brug af det danske Fængselsvæsen som interneringslejer for amerikanske statsborgere som befandt sig i Danmark under besættelsen. D. 23. februar 1945, besatte den tyske værnemagt højskolen og den måtte rømmes med en ½ time varsel for 150 fanger. 1951 ændrede skolen undervisningsform fra husholdnings- og landbrugsundervisning og blev forskole for den treårige sygeplejeuddannelse. Den 1. august 1972 – for ca 40 år siden – blev Odsherred Efterskole oprettet. Efterskolen drives nu som en kristen efterskole på folkekirkens grundlag for ca. 140 elever.