Jefferson Countys totale areal er 4 639 km² hvorav 27 km² er vann. I 2000 hadde fylket 19 009 innbyggere og administrasjonssenteret ligger i byen Madras som også er fylkets største by. Fylket ble grunnlagt i 1914 og har fått sitt navn etter fjellet Mount Jefferson.