In de Draeck en De Scherminckel zijn omstreeks 1508 tezamen gebouwd door de bestuurders van de Onze Lieve Vrouwekapel die naast De Scherrninckel stond. Voordien zal er ook wel wat gestaan hebben, maar daar is in de huidige bouw niets van terug te vinden. In het binnenwerk van beide huizen zit nog heel veel uit 1508. Niet alleen de plattegrond maar echt bouwmateriaal dat al die tijd gewoon op zijn plaats is blijven zitten. In de Draeck heeft nu een voorgevel die in 1840 geplaatst is. Toen is het huis ook zeven meter langer gemaakt. De voorgevel van De Scherminckel is van 1669, toen Laureijs Caluaert zijn huis wilde verfraaien. Hij heeft bijvoorbeeld die leuke boogjes boven de vensters op de verdieping laten maken. De winkelpui is van 1885, evenals veel van het interieurachter deze pui. Het is wel bijzonder, dat een winkelinterieur het zolang uithoudt zonder ingrijpende modernisering.