Está situado en uno de los cinco cerros que dominan Calatayud. Formaba parte de un conjunto defensivo formado por cinco castillos más y una muralla.
El edificio conserva la campana que regaló Pedro IV a Calatayud, cuando en 1366 recompensó el heroísmo bilbilitano en la guerra de los dos Pedros.