Oorspronkelijk verblijfplaats van de heer van Walburg. Heerlijkheid ontstaan in 1550 door de vereniging der heerlijkheden van der Moeren en Willemaers door ridder Willem van Waelwijck, onder de benaming "Hof van Walburg", naar diens echtgenote Walburgis. Hij sloopte het in puin vallende kasteel en verving het door het huidige. Door erfenissen en verkopingen werd het kasteel in 1618 onder meer ingericht als brouwerij. In 1846 kwam het in handen van J.F.G. van Naemen-Boeye, die het in 1851 volledig herstelde en aan de 19de-eeuwse smaak aanpaste.

Waterburcht in traditionele bak- en zandsteenstijl bestaande uit twee langse vleugels van verschillende lengte, met steil zadeldak (nok parallel aan de straat, leien) gevat tussen trapgevels. In de oksel van noordelijke- en zuidelijke vleugel, polygonale traptoren waartegen rechthoekige slotkapel. Rechts van de noordvleugel, ermee verbonden, doch voor de gevellijn uitspringend, een nagenoeg vierkante woontoren, qua volume en uitzicht gelijk aan de vrijstaande duiventoren links van het kasteel. Voor de zuidelijke gevel, ruim terras met twee prieeltjes.

Noordelijke vleugel (noordgevel) van zes traveeën en twee bouwlagen met hoge rechthoekige vensters (19de eeuw) voorzien van kwarthol geprofileerde zandstenen negblokken en ontlast door een gebogen strek met zandstenen aanzet- en sluitstenen. Boven de tweede en voorlaatste travee een getrapt dakvenster (drie treden en topstuk) met nagenoeg vierkant venster. Houten kroonlijst op modillons. Verankerde zijtrapgevels (dertien treden en topstuk) met rechthoekige vensters op onregelmatige plaatsen aangebracht.

Zuidelijke vleugel (zuidgevel) van negen traveeën en twee bouwlagen. Eenvoudige rechthoekige vensters en deur in de tweede travee, alle voorzien van zonneblinden. Gevel beëindigd op gelede architraaf en houten kroonlijst op modillons. Linkerzijtrapgevel (tien treden en topstuk) van vijf traveeën, evenals de voorgevel voorzien van rechthoekige vensters en deur, sommige nog met zonneblinden; in de geveltop twee nagenoeg vierkante vensters. Rechterzijtrapgevel met in elke bouwlaag twee rechthoekige vensters. Op de middenpenant van de begane grond, ingemetselde gedenkstenen: "Hunne Majesteiten Koning Albert en Koningin Elisabeth van België verbleven in dit kasteel in oktober 1914 na het beleg van Antwerpen", "G.D. Waelwyck, Force n'est droit", "Reaedificavit J. Van Naemen-Boëyé, Anno 1851". Achtergevel met twee zichtbare traveeën en centraal, getrapt dakvenster. Rechthoekige vensters met kwarthol geprofileerde zandstenen negblokken. Korfboogdeur met arduinen waterlijst en diamantkopsluitsteen.

In de oksel van beide vleugels, achtzijdige traptoren op vierkante plattegrond en bekroond door een ingesnoerde helmspits (leien). Baksteenbouw met verwerking van zandsteen voor de hoekblokken en speklagen. Rechthoekige muuropeningen op onregelmatige plaatsen ingeplant. Onderaan, rechthoekige harstenen gedenksteen: "Bezoek van Z.M. Koning Boudewijn inhuldiging 'Heirmanklok' 4 nov. 1956". Tegen de noordzijde van de torenvoet, rechthoekige slotkapel met trapgevel (vijf treden en topstuk) en zadeldak met brede overstek en houten modillons. Verhoogde begane grond met spitsbogig blindvenster met geschilderd traceerwerk. Bovenverdieping met rechthoekige venstertjes.

Nagenoeg vierkante woontoren rechts naast de noordelijke vleugel. Verankerde bak- en zandsteenarchitectuur van twee bouwlagen afgedekt door een zadeldak (nok loodrecht op de straat, leien) tussen twee trapgevels. Per bouwlaag in elke gevel een getralied kloosterkozijn met zandstenen, kwarthol geprofileerde hoekblokken.

Ten westen van het kasteel, vrijstaande duiventoren, identiek aan laatstgenoemde en voorzien van een groot aantal muurankers in de vorm van Sint-Andrieskruis. Naast deze toren, een stenen, gekasseide brug op drie rondbogen en aan de kasteelzijde voorzien van een gietijzeren hek aan bakstenen pijlers met zandstenen dekplaat.

Ruim terras voor de zuidelijke vleugel, uitkijkend over de parkvijver en op de twee vrije hoeken gemarkeerd door prieeltjes. Verankerde bak- en zandsteenbouw op vierkante plattegrond en afgedekt door een tentdak (leien) met dakkapel aan de noordzijde. Elke zijde geopend door een rondboogvenster in vlakke bakstenen omlijsting met imposten en sluitsteen; tot cordon doorgetrokken lekdrempels. Sommige vensters blind gemetseld, met geschilderde imitatieramen. Rondboogdeur volledig analoog aan de vensters, in de naar elkaar gekeerde zijden. Gevel bekroond door zandstenen fries met bakstenen casementen; brede dakoverstek op houten modillons.

https://inventaris.onroerenderfgoed.be/erfgoedobjecten/15237