In de jaren die daarop volgden is het kasteel steeds verder uitgebouwd. In de beginfase van de Tachtigjarige Oorlog heeft Huis Bergh veel te lijden gehad en in 1735 brandde het geheel uit. In 1939 werd een groot deel van het huis voor de tweede keer door brand verwoest. Dankzij de hulp van de plaatselijke bevolking kon gelukkig veel van de inventaris worden gered. Nog in hetzelfde jaar begon de wederopbouw, die in de herfst van 1941 werd voltooid. In 1912 werden het Huis Bergh en alle bijbehorende bezittingen eigendom van de heer J.H. van Heek, een industrieel uit Enschede. Hij richtte het kasteel in met een zeer bijzondere kunstcollectie. In 1946 droeg hij zijn eigendom over aan de Stichting Huis Bergh.
Lees meer over de Bouwgeschiedenis van Kasteel Huis Bergh