Le château remonterait au xe siècle. En 911, les Vikings remontant le Lot ont pillé l'église de Casseneuil et le château de Favols. Il est implanté près d'un gué. Le nom de Favols dans sa forme latine de Favolibus signifie "endroit de passage". C'était probablement un château péager qui a été édifié par la famille de Favols. Cette famille est citée dans les hommages rendus au comte de Toulouse en 1259.
Source Wikipédia, que vous pouvez consulter ci-dessous.