Door samenvoeging en verbouwing van twee panden is rond 1816 één gebouw ontstaan met een nieuwe voorgevel in eenvoudige empirestijl. De Latijnse School werd hier toen gevestigd, vanaf 1839 gymnasium. Het linkerdeel, mogelijk ooit onderwijzerswoning, werd eind 19e eeuw een winkelwoonhuis. Het pand is sinds 1893 in het bezit van vrijmetselaarsloge Silentium. Toen is een aanbouw, specifiek bedoeld voor het beoefenen van de vrijmetselarij - waaronder een rituele ruimte, ook wel ‘tempel’ genoemd gerealiseerd. De tempel werd in 1930 verbouwd volgens ontwerp van Jan Wils.