Le château a aujourd’hui presque disparu. On ne peut apprécier que quelques vestiges de ce que furent ses remparts. Il devait s'agir d’un simple château en pierre, avec une tour centrale et des remparts. Il devait servir de poste avancé des plus grandes forteresses des alentours.

D’après une vieille légende de Castell de Cabres, le village porte ce nom car, lors d’une guerre il y a très longtemps, il ne restait au village que femmes, enfants et vieillards, puisque les hommes étaient sur le champ de bataille. Un jour, à la tombée de la nuit, un vieil homme qui faisait le guet au château vit les troupes ennemies qui s'approchaient pour assiéger le village. Comme les villageois ne disposaient pas de moyens humains pour les en empêcher, ils firent monter au château toutes les chèvres du village et leur attachèrent un flambeau à chaque corne.

Lorsque l’ennemi vit toutes ces lumières dans la nuit, il pensa qu’elles venaient des flambeaux que portaient les soldats. Pensant alors qu’il s’agissait d’une embuscade, il se mit précipitamment à battre en retraite.

Le village gagna la bataille grâce à ce stratagème, et il prit le nom de « Castell » en raison du château, et « de Cabres » en hommage à ces chèvres qui mirent l’ennemi en fuite.

Données