Het kasteel van Florzé maakte oorspronkelijk deel uit van de heerlijkheid Sprimont, een feodaal gebied dat vanaf de middeleeuwen een belangrijke rol speelde in de bestuurlijke en militaire organisatie van deze streek. Het kasteel werd vermoedelijk gebouwd na de 13de eeuw, in een periode waarin lokale heren hun macht en aanwezigheid bevestigden door middel van versterkte residenties. Over de vroegste vorm van het kasteel is weinig met zekerheid bekend, maar het maakte deel uit van een netwerk van verdedigingspunten dat de controle over het grondgebied moest verzekeren.
Doorheen de eeuwen kende het kasteel van Florzé verschillende eigenaars en bewoners. Tot de vroegere families behoorden onder meer de heren van Presseux. Vanaf 1497 kwam het domein in handen van de invloedrijke familie de la Marck d’Arenberg, een geslacht dat in het Prinsdom Luik en ver daarbuiten een belangrijke politieke en militaire rol speelde. In de tweede helft van de 16de eeuw ging het bezit over op François Guillaume de Loncin, die wordt beschouwd als de laatste heer van Florzé in feodale zin. Tijdens zijn bewind werd het kasteel grotendeels verwoest, vermoedelijk als gevolg van de talrijke conflicten die de regio in deze periode teisterden. De hoofdtoren bleef echter gespaard, wat erop wijst dat deze het meest solide en verdedigbare onderdeel van het complex was.
Na deze vernieling werd het kasteel heropgebouwd, aangepast aan de veranderende woon- en verdedigingsbehoeften van de nieuwe tijd. Toch bleef het niet gevrijwaard van nieuw geweld. In 1794, tijdens de Slag bij Sprimont, werd het opnieuw gedeeltelijk verwoest. Deze veldslag, die plaatsvond in het kader van de revolutionaire oorlogen, bracht Oostenrijkse en Franse troepen met grote hevigheid tegenover elkaar en liet diepe sporen na in het landschap en het lokale patrimonium.
In 1825 brak een nieuwe fase aan in de geschiedenis van het kasteel. Graaf Clément de Berlaymont erfde het domein van zijn tante Henriette de Rahier, die kinderloos was gebleven. Onder zijn impuls werd het kasteel grondig verbouwd en aangepast aan de smaak en comforteisen van de 19de eeuw. Deze verbouwing gaf het gebouw grotendeels zijn huidige uitzicht, waarbij representativiteit en residentieel karakter belangrijker werden dan militaire functie.
Sinds 1904 behoort het domein toe aan de familie Kleinermann-Dallemagne, die het kasteel wist te bewaren als levend erfgoed. Vandaag staat het kasteel van Florzé open voor uiteenlopende evenementen en vormt het een plaats waar geschiedenis en hedendaags gebruik elkaar ontmoeten. Zo blijft het kasteel, ondanks de vele verwoestingen en heropbouwen die het heeft gekend, een blijvende getuige van de lange en bewogen geschiedenis van de streek.