Karjalohjalla näyttää olevan jäljellä vielä vanhoja kauniita puurakennuksia, joista yksi on nykyinen kirjasto, entinen koulu.

Koulu päätettiin rakentaa paikkakunnalle kuntakokouksessa vuonna 1874. Kuntakokous päätti myös ottaa rakennuspuita pappilan metsästä. Tästä aiheutui valitus, joka kuitenkin kumoutui kuvernöörin hylättyä sen. Kuntakokous päätti myös, että joka talosta ”tilan suuruuden mukaan” viedään rakennuspaikalle kiviä ja sahatukkeja. Itse rakennustyö tehtiin siten, että ”joka talosta, olkoon se suurempi tai pienempi, tehdään yksi päivä, torpeista, syytningin nauttivilta, käsityöläisiltä ja muonamiehiltä sekä sellaisilta, jotka ovat itsellisen kirjoissa tekevät yhden päivätyön koulun rakentamiseen”. (Lähde: Karjalohja, itsenäisen väen pitäjä. Toim. Veikko Kallio)

Koulu valmistui 1875 ja se maalattiin punamullalla 1881.

Nykyään kirjaston lisäksi rakennuksessa on toisessa kerroksessa näyttely- ja kulttuuritila Kulttuurivintti.