El castillo está situado en lo alto de la población. Tiene su origen en el siglo XI, aunque los restos que se conservan son del siglo XII. Está dividido en dos partes, una de ellas fue destinada a cementerio local, y la otra parte a defensa de la población. Fue lugar de asentamiento para los musulmanes. Después pasó a formar parte de la corona de Aragón. A este período, concretamente a la época de Pedro IV, pertenecen la mayor parte de los restos aún existentes. No está muy bien conservado, ya que la mayor parte del castillo fue destruido por dos terremotos. Esta fortaleza tiene la peculiaridad de albergar a la villa entera, toda ella formaba parte del castillo y éste está rodeado de montañas. En 1993 el castillo se compró a los marqueses de la villa. Fue declarado Monumento Histórico –Artístico. En el recinto amurallado destacan la Iglesia Parroquial, la Casa Orduña, hoy museo, y la prisión.