Le village de Cressia a été bâti par les carriers qui extrayaient la pierre dans sa reculée. Aussi les pierres des maisons d'habitation sont-elles particulièrement soignées. En levant les yeux sur le crêt qui domine la vallée, on voit se dresser un château trapu et son énorme donjon. Ses fondations datent du XIV^e siècle. Il a échappé (fait rare) aux destructions opérées lors de l'annexion de la Franche-Comté par la France, ce qui ne l'a pas empêché de subir des remaniements. Le comte de Bussy-Rabutin y séjourna et y écrivit des lettres à sa célèbre cousine, la marquise de Sévigné. Il abrite aujourd'hui une école privée pour jeunes filles.