De onduidelijke kroon boven het wapen lijkt nog het meest op een helmkroon. Dat is een kroon die in oude tijden op een helm gedragen werd. Wel weten we waar die steen vandaan komt, namelijk uit een oude Diezeboog die zich hier bevond. De Binnendieze die nu onder de straat doorloopt was hier vroeger open en er lag een brug over de Lombardsbrug. In de nabijheid was eens de eerste Munt van Den Bosch gevestigd vroeger had iedere stad meestal zijn eigen Munt. Als er gemunt was liet men de gloeiende geldstukken wel in een oude ijzeren soldaten helm in de Diest zakken om af te koelen. Verderop in deze straat was vroeger aan de rechterzijde de gotische ingang van de synagoge die fraaie entree is nu verdwenen. En dan staat nog altijd aan de linkerkant de oude Mortelkazerne bestemd voor de cavalerie. Zij werd in 1744 gebouwd tegelijk met drie andere kazernes. Ze hadden alle vier een eerste steen. Die vier stenen bleven bewaard hier zit hij nog altijd in de voorgevel.
In 1913 ontstond brand op de bovenverdieping. Het was een zware brand velen en niet alleen uit Den Bosch kwamen er naar kijken. Hij was van verre te zien. Tussen het geloei der vlammen door hoorde men regelmatig knallen, waardoor het vermoeden ontstond dat er daarboven munitie was opgeslagen. Verder dan het dak kwam de brand niet maar dat dak werd dan ook geheel vernietigd.

Helvoirt woonde daar 's morgens de binnenplaats kwam oprijden en, uitstijgend zijn gespan aan een stalknecht overgaf daarbij de tijd aangevend waarop paard en rijtuig weer klaar moesten staan voor de terugreis. Wij hebben dat meermalen gezien en gehoord 'vijf uur' klonk het dan meestal waarna de burgemeester zich in de richting van het stadhuis begaf. Tegenover het Hof van Zeven bergen heeft een huis gestaan in Italiaanse stijl dat vermoedelijk door de Lombarden gebouwd werd, die woonden er nogal veel in deze buurt. Later kwam het huis in 't bezit van Henrick van Deventher schepen en zwanenbroeder een voornaam man in een voornaam huis. Afgezien van de St. Joriskapel besloeg het de hele westzijde der straat. Henrick verleende meermalen gastvrijheid aan vorstelijke personen. Ook Karel V die trouwens ook al eens in het Hof van Zeven bergen gelogeerd had verbleef nog wel eens bij hem. Het beviel Karel daar blijkbaar heel goed want het bezoek van 1545 gaf hem aanleiding om zijn gastheer in de adelstand te verheffen. Henrick was daarover zó in de wolken dat hij een stenen beeld van de keizer in harnas liet maken en dat in een nis boven de poort van zijn huis plaatste. Het was ongeveer eenzelfde poort als die welke nu het huis 'De Munt' in de Posteistraat siert. Van toen af droeg Henrick's huis de naam 'Keizershof' en werd de straat Keizerstraat genoemd.