Por su especial ubicación defensiva acogió la ciudad romana, la ciudadela visigoda, la alcazaba musulmana, la fortaleza de los obispos medievales y, desde 1976, es uno de los Paradores de Turismo más bonitos. Aquí estuvo la esposa repudiada de Pedro I "el Cruel", Doña Blanca de Borbón, hasta su salida hacia el destierro. Se dice que vivió en una de sus torres, acompañada por un pequeño séquito, como era de costumbre entre las damas de su condición en los tiempos medievales.