Situado en un cerro fortificado, entre los riachuelos de Ceife y Taliscas, el castillo domina el paisaje desde lo alto de sus 573 m. Su construcción y población datan de 1189, cuando la región fue donada al Mestre de la Orden del Templo, D. Gualdim Pais.

El conjunto está compuesto por una cerca urbana que integra la Torre del Reloj, la Casa Consistorial y una Torre de Vigía, solitaria en un otero rocoso. La Torre de Homenaje, la cerca urbana y un segundo cinturón amurallado fueron construidos posteriormente bien como la barbacana. Sobre la puerta de acceso a la Villa se yergue la Casa Consistorial, edificada más tarde, en 1568.