Han Gan kom fra en fattig familie i Xi'an. Som ung ble han oppdaget av Wang Wei, en berømt dikter, musiker, maler og statsmann, som finansierte hans utdannelse. Etter studiene ble Han Gan tilknyttet det keiserlige hoff som maler.
Han Gan malte mange portretter og malerier med buddhistiske motiver. Han er mest kjent for sine malerier av hester, og han ble ansett for ikke bare å kunne male hestens fysiske kropp, men også dens ånd. Hans omdømme vokste og overgikk hans lærers. Hans malerier inspirerte og ble studert av senere tiders hestemalere.