Su ubicación es en una colina que domina el valle que se abre en el encuentro entre el Arroyo Areal y el río Balboa. Parece ser que se erigiría encima de lo que fue un castro celta-astur con un fin defensivo, al igual que la mayoría de las fortificaciones bercianas.
De su carácter señorial, que se deja entrever a partir de sus ruinas, sólo se encuentran citas y referencias en el siglo XIV, momento en que estuvo bajo la potestad de D. García Rodríguez (Adelantado Mayor de Galicia en dicho siglo). De los Rodríguez de Valcarce fue a parar al Conde de Lemos en el siglo XV, dependiendo igualmente de los Marqueses de Villafranca en el siglo XVI y siendo enajenado más tarde a los Reyes Católicos, que lo incorporan a la Corona de León.
Para acceder a la fortaleza es preciso ascender por una ruta con bastante dificultad. En el Castillo se manifiestan signos de una reforma en el siglo XV.
