Het Goudkantoor is gebouwd in 1635 al heette het gebouw destijds het Collectehuis. Het was een belastingkantoor voor Stad en Ommelande. De huidige naam stamt uit de periode van 1814-1887, toen het pand werd gebruikt als Waarborgbureau voor Goud- en Zilverwerken. Hier werden gouden en zilveren voorwerpen gekeurd en van een merkje voorzien.

Na 1887 heeft het gebouw meerdere functies gehad, zoals voor, tijdens en na de oorlog als Scheepvaartmuseum, VVV-kantoor. Tijdens de bouw van het 'nieuwe stadhuis' deed het dienst als stadjershuis of informatiedesk voor de gemeente Groningen.

Het Goudkantoor is gebouwd met markante gevels in de Hollandse Renaissancestijl. Deze bouwstijl was vroeg 17e eeuwse Groninger architectuur. Opvallend zijn de schelpvormige motieven boven deuren en ramen, vermoedelijk afkomstig van een beeldhouwer uit Bremen. In onze stad zijn meerdere van deze motieven op oude panden aangebracht.
In het begin van de vorige eeuw werd het pand eigendom van de gemeente Groningen, die onmiddellijk het provinciewapen in de gevel liet vervangen door het wapen van de stad Groningen.

Na een grondige bouwkundige restauratie is het pand in zijn huidige vorm als café-restaurant ingericht. De motieven op de muur zijn origineel 17e eeuws. De kleuren aan de buitenzijde van het Goudkantoor (rood, oker, goud en blauw) zijn middels kleuronderzoeken van de verfresten op de stenen vastgesteld.

Op de gevel treffen we de Latijnse spreuk "Date Caesari quae Caesaris "aan, wat letterlijk vertaald 'Geef de keizer wat des keizers is', betekent.
Deze spreuk stamt nog uit de tijd van het innen van de belastingen.