La maison forte des XIIIe-XIVe siècles fut transformée dans le premier tiers du XVIe par Geoffroy de Pérusse qui fréquentait les cours royales. Ce fut l'une des plus précoces manifestations de "la première Renaissance" en Limousin.
Le château, pillé et incendié à la Révolution, servit de carrière de pierres (on les retrouve dans les maisons du bourg). Il en reste deux tours d'angles, l'une polygonale, l'autre elliptique (du sommet, beau panorama), un fossé, un boulevard pour armes à feu, deux pavillons.
A la mairie, dans la salle lapidaire sont rassemblés les éléments (figures zoomorphes, gargouilles, etc.) découverts par l'association ARCHEA au cours des fouilles qu'elle a effectuées sur le site. Dans une autre salle, une exposition permanente retrace l'histoire du château. Visites guidées tous les après-midi en juillet et août excepté le mardi. Présentation du CD.Rom "Le Château des Cars, résidence de grands serviteurs de l'Etat".
Près du château, les anciennes écuries sont ornées de cinq lucarnes sculptées de style Renaissance (privé). Devant le château, observez une réplique du buste d'Amédée François Régis de Pérusse, duc des Cars, commandant la 3e division de l'armée d'Afrique en 1830. L'original était à Alger dans un jardin public appelé le bois des Cars.
Le chemin de randonnées permet d'aller, dans la forêt des Cars, à la bonne fontaine "la Font du Rieu Tari" ou "Font de Saint-Fiacre" qui passe pour guérir les humains et les animaux et, près du hameau de la Goupillère, voir le dolmen de la Pierre Levée.
