De basis voor de huidige structuur is rond 1980 ontstaan. Harmonieorkest Auletes is ontstaan uit een blaaskwintet en een fluitkwartet. Strijkorkest Ma Non Troppo werd opgericht in 1980; een succesvolle koorworkshop resulteerde in de oprichting van het gemengd koor Vokollage. In 1986 sluit ook Sambuca, het blokfluitensemble, zich aan bij de vereniging. Het strijkorkest wordt in 2002 kamerorkest en in 2009 omgedoopt tot symfonieorkest. In 2016 is Sambuca helaas opgeheven wegens te weinig leden. Sinds 2002 bestaat ESMG Quadrivium uit de volgende onderverenigingen: blaasorkest Auletes, symfonieorkest Ensuite en gemengd koor Vokollage.
Naast de verschillende orkesten en het koor heeft Quadrivium ook enkele actieve ensembles die uit eigen beweging muziek oefenen en uitvoeren. De accommodatie bezit ook drie piano’s en een vleugel en heeft verschillende oefenruimtes die 24 uur per dag door leden kunnen worden gebruikt om samen te oefenen of om individueel te oefenen. We organiseren ook activiteiten voor en geven muzikale coaching aan ensembles en pianisten.