Edificado por los Zuñiga, allá por el siglo XIII, señores que fueran de la villa en el siglo XV, junto con los Alburquerque, Guzmanes, Portocarrero y Camarasa en siglos posteriores.(1)

En su castillo desmantelado consta que descansó el emperador Carlos V durante un viaje a Cevico de la Torre. Pero apenas quedan unos mínimos vestigios de la fortaleza.

Hace algo más de sesenta años, su dueño, el marqués de Camarasa, mandó desmontar y acarrear sus sillares para construir una pesquera y otras dependencias en la Granja de Quiñones, abajo junto al Pisuerga. Luego los propios vecinos enterraron otra buena parte de los muros supervivientes como firme de sus calles.(2)