No hay nada registrado de la configuración original del reducto.Visitada por Alejandro Herculano, la fortaleza de Penedono se encontró en ruinas en ese momento y permaneció hasta el siglo XX.[1] Más trabajos en 1949, el plan del tercer piso y la torre fueron repavimentados, hubo reparaciones de los techos, instalación de nuevas puertas y reajustes en los accesos.[1] En 1195, para mejorar la posición estratégica del territorio fronterizo, el rey D. Sancho I concedió el primer Foral de la región, o carta, a Pena de Domus, la designación medieval para el burgo.[1][2] Los ancianos residentes de Penedono pidieron al Rey que detuviera esta intención y devolviera el municipio a su estado.En ese momento, Penedono se disputaba con Trancoso el ser el lugar de nacimiento del legendario caballero Magriço.[1][2] Muchos de los grandes hombres del pueblo pidieron a D. Gonzalo para que confirmara a su hijo, Gonçalo Vasques Coutinho, como señor de las tierras, debido a que Gonçalo puso repetidamente sus hombres y soldados de escudo en la defensa del castillo.Para 1527, el catastro del reino indicaba que esta población incluía 486 viviendas.[1] Entre las dos torres al suroeste, hay un pasillo con barandilla sobre la cornisa, que soporta un gran arco sobre el que hay una puerta redondeada (accesible por una escalera curva) coronada por un tímpano enmarcado.
Las torres que flanquean la entrada suroeste del castillo.