Byens den gang rikeste mann, hanseat-etterkommeren Hillebrand Harmens, kjøpte gården Slettebakken og bygget hovedbygningen i ca. 1783.
Det symmetriske hovedhuset var langt, ikke særlig bredt, med to svaler, saltak og loftsark på begge sider.
En modernisering rundt 1830 resulterte i stilblanding med en portal i buet rokokko-omramming og dørblader som var typisk for tidlig empire.
Huset og uthusene ble fredet i 1927.
Slettebakken gård ble utbygget som boligområde fra 1930-årene.