Inicialmente instalado en el palacio de los Thurn y Tassis, los edificios que ocupa actualmente, cuentan con tres alas dispuestas en torno a un patio de honor, que son obra del arquitecto Jean-Pierre Cluysenaar y se edificaron entre 1872 y 1876.

En 1967, se produjo la escisión en dos instituciones lingüísticas autónomas, el «Conservatoire royal de Bruxelles» (francés) actualmente dirigido por Frédéric de Roos y el «Koninklijk Conservatorium Brussel» (neerlandés) dirigido por Peter Swinnen.

Ambas instituciones se reparten los edificios y trabajan conjuntamente.

Esta biblioteca contiene aproximadamente 250.000 partituras y libros de música, musicología y pedagogía musical, y una pequeña colección de grabaciones (en su mayoría de vinilo).

Hoy en día, a pesar de los conservatorios flamenca y francesa ambas iguales recursos para invertir en la biblioteca, la gran mayoría del trabajo real se realiza por el ala flamenca, incluyendo el desarrollo del catálogo en línea.