Het bestaan van het château de Wolff de Moorsel is nauw verweven met de geschiedenis van de heren van Trivières. De oudste bekende vermelding van het domein dateert uit 1437, wanneer Jehan de Namur als eigenaar wordt genoemd. In die periode maakte het goed deel uit van een feodaal landschap waarin lokale heerlijkheden een centrale rol speelden in het bestuur en de exploitatie van het omliggende land.
Het huidige kasteel kreeg zijn definitieve vorm aan het begin van de negentiende eeuw, toen de familie de Wolff de Moorsel besloot er een nieuwe residentie op te richten. Aanvankelijk ging het om een sober, vierkant gebouw, dat vooral functioneel was opgevat en weinig architecturale uitbundigheid vertoonde. In de loop van de negentiende eeuw werd het echter aangepast aan de heersende esthetische opvattingen en de sociale status van zijn eigenaars. Omstreeks 1865 onderging het kasteel een belangrijke uitbreiding: karakteristieke hoektorens en diverse bijgebouwen werden toegevoegd, waardoor het geheel een meer monumentale uitstraling kreeg en een uitgesproken neoklassiek karakter ontwikkelde.
In 1908 verkocht baron Louis-Edouard-Emmanuel-Ghislain de Wolff de Moorsel het domein aan de maatschappij die de kolenmijnen van Bois-du-Luc en Trivières exploiteerde. Deze overdracht weerspiegelt de ingrijpende economische en sociale veranderingen die de streek in die periode doormaakte, waarbij industriële ondernemingen steeds vaker historische domeinen verwierven. Enkele jaren later, op 30 maart 1914, kwam het kasteel in handen van de gemeente Trivières. Vanaf 1917 werd het ingericht als gemeentehuis, wat het gebouw een nieuwe publieke functie gaf. Tijdens de Eerste Wereldoorlog werden de bijgebouwen echter gesloopt, vermoedelijk om praktische of militaire redenen.
In 1949 werd het kasteel zwaar getroffen door een brand, die aanzienlijke schade veroorzaakte aan het gebouw en zijn interieur. Na deze tegenslag werd een zorgvuldige restauratie uitgevoerd, waarbij men ernaar streefde het historische karakter van het kasteel te behouden en tegelijk het gebouw aan te passen aan zijn nieuwe functies. Vandaag huisvest het château de Wolff de Moorsel de gemeentelijke bibliotheek. Daarmee blijft het een belangrijk centrum van cultureel en maatschappelijk leven in Trivières, en vormt het een tastbare getuige van de lange en veelzijdige geschiedenis van het domein.