Point frontière entre le Périgord et l'Agenais, la forteresse de Gavaudun occupe une position stratégique renforcée par la qualité défensive naturelle du site.Le plateau calcaire, effilé sur lequel est érigé le château, a été séparé du plateau d'origine par l'érosion, puis cette brêche a été agrandit par la main de l'homme pour rendre ce nid
d'aigle imprenable.C'est un très bel exemple de l'architecture castrale du XIII°siècle.
Au fil des alliances, le castel de Gavaudun sera la possession de plusieurs grandes familles du Sud Ouest.