De manera inicial instal·lat al palau de la família Thurn i Tassis, els edificis que ocupa actualment, barreja de tres ales disposades al voltant d'un pati d'honor, són obra de l'arquitecteJean-Pierre Cluysenaar i han estat edificats entre 1872 i 1876.
1967 va ser l'any de la separació en dues institucions lingüístiques autònomes, el Conservatoire royal de Bruxelles, actualment sota la direcció de Frédéric de Roos, i el Koninklijk Conservatorium Brussel sota la direcció de Peter Swinnen. Les dues institucions es reparteixen els mateixos edificis i entretenen una intensa col·laboració.