La porte d’Albe, seul vestige de l’enceinte médiévale de la ville, date du XIIe siècle.
En 1718 elle est surélevée de 3 étages, coiffée d’un bulbe et d’un lanternon, pour servir de clocher et de beffroi.
Elle perdra cette fonction en 1906 après la construction de la nouvelle église Saint-Martin.
Vouée à la destruction elle sera finalement classée monument historique en 1922