Nacido en el seno de una familia de emprendedores catalanes que se había asentado en el siglo XVIII en Guipúzcoa (donde desarrollaron una importante actividad industrial), fue educado con un talante liberal y crítico con la época que le tocó vivir.

Fue encaminado a la carrera de Derecho por su padre, Jaime Brunet Goitia, jefe local del partido republicano que llegó a ser teniente de alcalde del ayuntamiento de San Sebastián, donde ya habían ocupado la alcaldía su abuelo y bisabuelo.

Cursó sus estudios en la universidad de Valladolid, en la que ejerció por un tiempo como profesor ayudante.

En estos viajes, según confesaba, captó y comprendió cuánta discriminación y violencia, cuánto abuso de los poderosos sobre los débiles existen aún en nuestro siglo, y con qué facilidad se conculcan diariamente los derechos más elementales de la persona humana.

Al no tener descendencia directa, y movido por sus sentimientos que le rebelaban contra las actuaciones injustas, decide legar su fortuna para crear a su fallecimiento la fundación que con su nombre se dedique a divulgar los derechos humanos y a premiar a quienes por su trabajo en defensa de los mismos se hicieran merecedores de este reconocimiento.