Le nom de Castillon-en-Couserans fait songer au château féodal qui se dressait sur un monticule dominant la ville. De ce monument qui fut pendant de longues années la résidence des comtes de Comminges, il ne reste que la chapelle du calvaire dénommée Saint-Pierre, datant du XIIe siècle et fortifiée au XVe siècle. Celle-ci abrite des peintures romanes aux thèmes iconographiques rares. Comme beaucoup de ses frères, le château fut rasé sur les ordres de Richelieu. Dans l'église du village, de construction plus récente, on peut admirer deux bois polychromes du XVIe siècle, un Christ aux mains liées et une pietà inspirée de celle d'Audressein.