Fue construido durante la primera repoblación cristiana aprovechando una antigua torre romana y fue la residencia de la familia normanda en la ciudad hasta 1171, en que pasó a manos del rey de la corona de Aragón. El castillo sufrió profundas reformas en tiempos de Jaime II y de Pedro III. Pervive la fachada meridional con varios ventanales del siglo XIV, algunos muros y arcadas en el interior, almenas, y especialmente la sala gótica del piso superior, con elegantes arcos de medio punto que sostienen la cubierta plana de madera. El castillo fue parcialmente destruido por las tropas francesas en 1813.

Ver horarios y precios en Museos y Monumentos