Castelló de Farfanya fa honor a la imatge típica del poble situat al peu del castell, realment es així.
Els àrabs, en temps dels Banu “Qası” (segle IX), hi bastiren una fortalesa per tal de defensar el valiat de Lleida-Balaguer contra els cristians d’Urgell i de Barcelona.
Segons Pere Sanahuja, Castelló de Farfanya fou conquerida el 1116 pel vescomte Guerau (II) de Cabrera.