Om de architectonische schatten van Pesmes te ontdekken, is een wandeling door de geplaveide straten een must. Verklarende borden geven je route aan en onthullen de geheimen van gebouwen die op de monumentenlijst staan, zoals het 15e en 16e eeuwse Château Rouillard, het 16e eeuwse Hôtel Mairot en de oude Comédie. Pesmes, een voormalige strategische locatie op de weg van Gray naar Dole, heeft een turbulente geschiedenis achter de rug. Toch is de stad erin geslaagd een rijk erfgoed te bewaren, zoals blijkt uit de 13e- en 16e-eeuwse kerk Saint-Hilaire, stenen huizen en wijnbouwershuisjes.
De kerk, die op de monumentenlijst staat, heeft de typische klokkentoren uit de Franche-Comté met zijn kleurrijke geglazuurde tegels.