Volkert Overlander: edelman, rechtsgeleerde, koopman, reder én Amsterdamse regent uit de Gouden Eeuw kocht in 1618 de hoge heerlijkheid Purmerland en Ilpendam. Een gebied dat de oppervlakte van de huidige gemeente Purmerend en delen van de gemeenten Landsmeer en Ilpendam omvat.

​

In 1622 liet Overlander slot Ilpenstein bouwen. Na Overlander heeft het slot nog een aantal bekende inwoners gekend zoals Amsterdamse burgemeesters Cornelis de Graeff en Frans Banninck Cocq. De laatste kun je tot op de dag van vandaag nog terugvinden in het Rijksmuseum: hij werd door Rembrandt van Rijn op de nachtwacht vastgelegd als kapitein van de schutterij. 

​

De laatste bewoners van het kasteel waren Christina Elisabeth de Graeff en haar echtgenoot Jacob Gerrit van Garderen. Na hun overlijden werd het slot in 1872 verkocht en afgebroken. Op de plek van het voormalige slot werd in 1938 de huidige boerderij gebouwd. De 400 jaar oude boomgaard is altijd intact gebleven.​