Den första prästgården byggdes ungefär 100 meter sydväst om Grangärde kyrka och härstammade troligen från 1400-talets slut, då Grangärde församling började hålla med egna präster. År 1628 nämns ”Prestegården” i ett protokoll från en biskopsvisitation i Grangärde. Då bestod anläggningen av gården och ett 25-tal ekonomibyggnader ”för en prästgårds alla behov och ändamål”.
Den ursprungliga prästgården ersattes år 1797 av en ny byggnad. Med undantag av altanen och entrén på huvudbyggnaden är exteriören fortfarande densamma. Huvudbyggnaden flankeras av två fristående flygelbyggnader. Samtliga byggnader är uppförda i trä med stående panel i fasaderna som är målade i ljusgul kulör med vita detaljer. Taken är valmade och brutna sadeltak, täckta med lertegel. Huvudbyggnadens entréfasad accentueras av en mittrisalit i två våningar. Fram till huset leder en trädplanterad allé som sluttar ner till Bysjön.
Nära prästgården finns den gamla tiondeladan och byns sockenmagasin (ej att förväxla med närbelägna Stora sjömagasinet) bevarade. Magasinet, en timmerbyggnad i två plan, uppfördes troligen under 1700-talets missväxtår för att säkra tillgången på utsäde.
