Cabrejas del Pinar fue paso obligado en la ruta que desde el valle del Duero, de ida y vuelta de los ejércitos califales. Algunos lienzos del recinto fortificado, puertas y muros de la torre del homenaje permiten distinguir el trazado.

La torre del homenaje construida en mampostería y refuerzo de sillares en los esquinales, tuvo planta cuadrangular como muestran los mechinales que recibieron la viguería de madera de las cuatro plantas del fortín.

Pervive en el extremo oriental del recinto restos de una atalaya de planta circular posiblemente levantada en el siglo X para la defensa de los territorios del Califato.