Colleget er oppkalt etter den Anglo-Saksiske Saint, Hilda of Whitby og ble grunnlagt i 1893 som et college for kvinner. Det var det siste colleget i Oxford som var åpent bare for kvinner. I 2008 åpnet det også for mannlige studenter.[1] Nå har det nesten like mange menn og kvinner, både på lavere og høyere nivå.
Den nåværende rektor er professor Sarah Springman som overtok stillingen i 2022.[2]
Per 2012 hadde høyskolen et fond på 37 millioner pund, og eiendeler verdsatt til 45 millioner pund.[3]