Zoals we eerder gezien hebben trad in Bergen op Zoom de wet van 1827 pas op 1 oktober 1838 in werking. Het Kantongerecht was vanaf die datum gevestigd in de bovenverdieping van een gebouw achter het gemeentehuis. Voor 1866 kon men deze ruimte gebruiken zonder er enige vergoeding voor te betalen. Na 1866 moest krachtens een huurovereenkomst ? 120,- per jaar aan huur betaald worden. Dat deze prijs niet zomaar overeengekomen was, blijkt wel uit de vele brieven tussen het Ministerie van Justitie en de gemeente Bergen op Zoom waarin het Ministerie schrijft dat ze de prijs te hoog vindt met het oog op de omstandigheid dat er in het lokaal niet gestookt kan worden (!), hetgeen men in de winter nogal onaangenaam vond.

In 1897 werd door het Ministerie van Justitie opdracht gegeven om een kantongerechtsgebouw op te richten in Bergen op Zoom. Dit gebouw werd gebouwd naar ontwerp van W.C. Metzelaar. Het kwam te staan op de hoek van de Arn.Asselbergsstraat en de Stationsstraat, waar thans V&D gevestigd is, en had een trapgevel boven het middenstuk met versieringen in de neo-renaissancestijl. Het gebouw werd al in 1898 in gebruik genomen. Gedurende 47 jaar kon het Kantongerecht gebruik maken van haar eigen pand. Op 25 februari 1945 moest men echter weer uitzien naar een andere ruimte. Op die datum trof namelijk een V-1 een aantal panden, waaronder het Kantongerecht, dat daarna niet meer als zodanig te gebruiken was. Als gevolg van deze tegenslag werd de griffie overgebracht naar de Gertrudiskerk en daarna voor vijf jaar naar het pand aan de Grote Markt, waar nu de Camillo-bar gevestigd is. De zittingen werden in die tijd gehouden in de markiezenzaal van het stadhuis. Pas in juli 1951 werd intrek genomen in het huidige pand in de Stationsstraat, nadat dit eerst geschikt gemaakt was om als Kantongerechtsgebouw te dienen.

Het pand is versierd met in het bovenlicht boven de toegangsdeur een opgaande zon met de spreuk: 'Sol Justitiae illustra nos', wat betekent: 'Zon van de gerechtigheid verlicht ons'.

Dat het zolang heeft moeten duren (6 jaar) voordat men in het gebouw kon trekken was volgens de toenmalige burgemeester van Bergen op Zoom het gevolg van de ambtelijke molens, waarvan men toen dus ook al last had.

In 1960 ondergaat de griffie, die zich dan nog op de begane grond bevindt, een aanzienlijke uitbreiding. Dit was onder andere nodig omdat de werkzaamheden enorm toegenomen waren.

In 1975 werden de archieven verplaatst naar de griffieruimte op de begane grond. Het griffiepersoneel, de kantonrechter en de gerechtssecretaris verhuisden naar de eerste etage. Het kantoor van het produktschap voor vis en visprodukten, dat geruime tijd ook in het pand gevestigd was, betrok het pand aan de Stationsstraat 17. Dit alles was noodzakelijk omdat de vloer van de zolderetage te zwaar belast werd, door de steeds toenemende hoeveelheid archiefmateriaal.