A los lados sendas pilastras sobre plinto encuadran el arco, protegido en la parte superior por un sencillo entablamento.

Posee dos torres; la principal, sobre la calle Camberos, cuenta con un esbelto balcón de esquina entre finas columnas compuestas y adosadas, trazado por Pedro Marquina en 1563; sobre él que se eleva un frontón partido en el que destaca un busto decorativo en altorrelieve y sobre un angelote, las armas de la familia.

Posee planta cuadrada en dos alturas: el primer piso con columnas toscanas y arcos de medio punto; balaustrada con columnas jónicas y arcos escarzanos en el segundo,[2]​ ambas con galerías abovedadas.

Sin embargo, ninguno de los dos llegó a verlo terminado y fueron sus descendientes quienes completaron la obra en el siglo siguiente.

[3]​El palacio perteneció a los Godoy por generaciones, pasando luego a los Roco de Godoy, por lo que también se conoció como casa de Roco, y por último recayó en los Carvajal.