Het Huys te Warmont werd omstreeks 1300 gesticht als adellijke residentie van de heren van Warmond. Tot 1525 werd het huis bewoond door het geslacht Van den Woude. Via het geslacht van Duivenvoorde komt in 1774 in handen van Cornelis Pieter, baron van Leyden, die het laat verbouwen in de huidige laat-barokke classicistische stijl met witbepleisterde gevel. Ook het monumentale koetshuis stamt uit deze periode. Het huis wisselt in de jaren nadien nog meerdere malen van eigenaar, tot het in 1960 in handen komt van de gemeente. Deze verkoopt het huis aan Stichting Huys te Warmont en het park aan de Stichting Het Zuid-Hollands Landschap. Het huis is sinds 2018 in bezit van Hendrick de Keyser Monumenten. Het park (in de volksmond het Bos van Krantz) is vanaf 1800 geleidelijk getransformeerd tot landschapstuin met slingerpaden, waterpartijen, open plekken en fraaie zichtlijnen. Bij de ingang bevindt zich een portierswoning en in het bos verscholen ligt de oranjerie met rozen- en kruidentuin.