Los estudios arqueológicos han encontrado restos de carbón en los niveles más antiguos del yacimiento, lo que demuestra que la fortaleza sufrió un importante incendio en algún momento de su historia.
Posteriormente, durante las décadas de 1950 y 1960, muchas de las piedras del castillo fueron extraídas y reutilizadas para obras agrícolas y caminos cercanos, acelerando su deterioro.
Además, la instalación de infraestructuras modernas en el cerro alteró parte del aspecto original del recinto
.
La revuelta morisca
Uno de los episodios históricos relacionados con el castillo tuvo lugar tras el decreto de expulsión de los moriscos promulgado por Felipe III en 1609.
Las montañas de La Canal de Navarrés fueron escenario de diversos enfrentamientos protagonizados por grupos moriscos que intentaban resistir o huir hacia la costa. Sin embargo, según algunas fuentes, los rebeldes no llegaron a utilizar eficazmente la fortaleza de Quesa para su defensa.
