Le château (en totalité) est inscrit au titre des Monuments historiques.

Le château est inscrit au titre de la loi du 2 mai 1930 (art. L.341-1 à 22 du code de l’environnement).

La tour du Château, haute de 16 mètres, de Cascastel des Corbières date du 12ème siècle.

En 1390, suite aux raids incessants des mercenaires aragonais, le vieux Fort de Cascastel est reconstruit. L'enceinte est relevée et deux tours dont l'une est aujourd'hui intégrée à une maison sur la Berre sont construites.

Les seigneurs vivaient ordinairement à la cour des Vicomtes de Narbonne ou dans leurs logis proches de la Tour. Un grand corps de logis a été construit aux XVIIe et XVIIIe siècles.

Le château fut habité vers 1920. Les derniers occupants le vendirent à la commune en 1966.

Pendant la période révolutionnaire Joseph Gaspard Pailhoux de Cascastel demeure maître du château. Il deviendra le premier maire de Cascastel.