Het gebouw, vroeger ook Walensteyn genoemd, werd al in de 13de eeuw genoemd. Eind 13de of begin 14de eeuw werden er twee verdiepingen opgebouwd waarna de huidige hoogte van bijna 15 meter werd bereikt.

De donjon is waarschijnlijk uit de 14de eeuw, en stond jarenlang alleen. De toren bestond oorspronkelijk uit slechts één ruimte waarboven zich een gevechtsplatform bevond. De gevel was toen 6,5 meter hoog. De muren zijn 120cm dik. Het gebouw steunt op gewelven en hoekpijlers. Rond 1550 werd er een woonvleugel aangebouwd.