Виконтство Кастийон располагалось на юго-западе Франции . В его центре находился город Кастийон-сюр-Дордонь (ныне Кастийон-ла-Батай). Целью виконтства, существовавшего с 10 века, была защита переправы через реку Дордонь .
Семья виконтов потеряла свою власть из-за восстания барона Гиенна против Симона де Монфора . В конце 13 века Кастийон перешел к Жану I де Грайи , потомки которого правили в Кастийоне — не считая небольшой ссоры между Англией и Францией — до 16 века.
Преемником Дома Грайи с середины 16 века стал Дом Ла Турд'Овернь (Тюренн). Потомок, Андре Лебертон, потерял свои феодальные права на Кастильон во время Французской революции и продал Кастийон в 1795 году.