Cette tour, achevée en 1248, est l’unique vestige du château construit sous Louis IX (Saint Louis). Elle en était sûrement le châtelet d’entrée, conçu pour être imprenable grâce notamment à des murs de six mètres d’épaisseur.
On accède aux différents niveaux de la tour par un escalier en vis.

Au rez-de-chaussée on trouve la salle des gardes mesurant 10 m de diamètre et 12 m de haut. Elle est dotée d’un placard, d’un four à pain, d’un puits d’eau potable et d’une statue de St Louis. Un escalier en spirale sert d’accès à l’étage.

Au premier étage, la salle des Chevaliers dont les fenêtres sont si longues qu’elles descendent au dessous du plancher servira à plusieurs reprises de prison
45 templiers puis Charles d’Artois et Jean II D’Alençon, accusés tous deux de trahison, y sont emprisonnés respectivement au début et à la fin du XIVe.

Ce lieu est tristement célèbre pour avoir servi de prison aux protestantes cévenoles, à partir de 1686. On y incarcère d’abord des hommes, puis, après l’évasion spectaculaire d’Abraham Mazel, des femmes. Parmi ces captives, Marie Durand, qui a été emprisonnée durant trente-huit ans, fait figure de modèle de la résistance protestante à l’intolérance.