De oorspronkelijk panden zijn omstreeks 1623 gebouwd, ze zijn vermoedelijk daar opgetrokken door de steenkoper Hendrik Cromhout.

Rond 1725 heeft kleinzoon Jacob Cromhout, heer van Nieuwerkerk (1608-1669) die dan op Herengracht 366 woont, de eenvoudige huizen die er stonden, vervangen door grotere koopmanshuizen, onder één rechte kroonlijst met consoles. Dat zijn dan de huisnummers Keizersgracht 365, 367, 369, 371 en 373.

Deze huizen waren bedoeld voor de naasten en er zaten tevens twee poorten die toegang geven tot de koetsen en de paarden van de bewoners aan de Herengracht. De huizen hebben elk een stoep naar de voordeur.

Omstreeks 1760 gaan ze over op Jacob Hendrik Baron van Wassenaar van Alkemade.

Dit huis is 7,13 m breed.

365 en 367 zijn in 1874 verenigd en tot verkooplokaal ingericht, dat van de Grimburgwal - het O.Z. Heeren logement is overgebracht, evenals het zandstenen poortje met het gemeentewapen dat hier nog bestaat. Zie voor de verdere geschiedenis Keizersgracht 365-367