De huidige villa aan de Zeevangszeedijk in Edam was ooit een simpele arbeiderswoning. Oorspronkelijk een saai dijkhuis, waar in 1872 boven een koffiehuis werd gevestigd met de naam Buitenlust.. Begin 1900 kocht de heer Noothoven van Goor het gebouw. Deze man beweerde dat hij een bastaardzoon van koning Willem III was. Hij maakte van het gebouw een lustoord , waar vele feesten werden gehouden.