El castillo aparece documentado por primera vez a finales del siglo X, cuando formaba parte del término de Seva. Era una posesión de los vizcondes de Osona y Cardona y dominio del condado de Barcelona. Durante la segunda mitad del siglo XII, el vizconde empeñó el castillo a Guillem Ramon de Montcada. Parece ser que el vizconde no devolvió el dinero y Guillem Ramon de Montcada decidió apoderarse del castillo. El conflicto fue tan importante, que tuvo que intervenir el rey. Al poco tiempo de la sentencia del monarca, Guillem Ramon de Montcada volvió a hacerse con el control del castillo.

En 1265, el vizconde Ramon de Cardona vendió la baronía del Brull al obispo de Vic.

Poco podemos contemplar de esta fortaleza hoy en día, a pesar de tener una gran importancia en su día. Tenía planta pentagonal, apuntada hacia el sur.

Los ángulos estaban reforzados por torres circulares. Sólo se ha conservado el sector nordeste, dónde todavía se levanta una torre de casi un metro de anchura. Esta quedó oculta por otra torre que se construyó encima suyo, cuando se reforzó la fortificación

Las dos etapas constructivas se produjeron entre los siglos XII y XIII.

Todo el recinto se organizaba alrededor de una torre circular, hoy desaparecida.