Byens fattigvesen vedtok i 1806 å kjøpe to hus som skulle brukes som arbeidshus for byens mange fattige. Virksomheten kom fort i gang, i desember 1807 var hele 325 av byens fattige i arbeid her. Disse hus lå der Myntgata 8 er i dag.

Ved bybrannen i 1810 brant disse bygningene ned, og nye hus ble reist i 1816.

Den nåværende bygningen ble tatt i bruk som amtssykehus fra 1816. I 1893 kom den i privat eie for så i 1908 å bli kjøpt av kommunen som leide den ut til private formål. Blant andre har stadslege Carl Olaf Rogstad Fodstad bodd her.

Fra 1916 var det skole i bygningens første etasje. I 1928 ble det gjennomført en omfattende oppussing, og hele bygningen kunne tas i bruk som skole, en virksomhet som har fortsatt helt til våre dager.

Fra høsten 2003 er det voksenopplæring for fremmedspråklige som holder til her.

Kilder: BYE 52