In 1567 kocht het in de haringhandel rijk geworden lid van het Schonevaardersgilde Herbert Dapper het pand aan. Hij liet het in 1575 verbouwen. Het Schonevaardersgilde voerde een wapen met daarop drie gekroonde haringen. Op een gevelsteen valt nog de oorspronkelijke naam van het huis In di drie vergulde herick te lezen.

De leden van het Schonevaardersgilde dreven handel met Skåne (Schone), tegenwoordig in Zweden, maar vroeger in Denemarken gelegen. Op de heenreis bracht men er per schip laken, wijn en zout. De retourvracht bestond voornamelijk uit haring. In Deventer werd die niet ver van het huis van Dapper gerookt aan de Bokkingshang. In de grote kelder, die een stuk onder de bestrating van de Brink doorloopt, bevindt zich een waterput.