Brito fue miembro del Partido Democrático Nacional (PDN, que luego se transformaría en Acción Democrática) desde 1936, y luego de la división de la izquierda, en el Partido Comunista de Venezuela (PCV), junto a Domingo Maza Zabala y Luis Miquilena.
En 1946 ingresa al Instituto Pedagógico Nacional para obtener el título de profesor en Ciencias Sociales.
Viaja a México y allí estudia en la Escuela Nacional de Antropología e Historia con Wenceslao Roces y François Chavalier, graduándose como etnólogo y maestro de antropología.
Regresa a Venezuela en 1959, luego de la caída de Marcos Pérez Jiménez, e ingresa en la Universidad Central de Venezuela para graduarse como licenciado de Historia y doctor en Antropología.
Su tesis doctoral es la conocida obra La estructura económica de Venezuela colonial, escrita en 1963 y publicada en 1978.