Jimmy Jam è figlio di Cornbread Harris, un musicista jazz di Minneapolis. Proprio a Minneapolis (Minnesota) ha incontrato Lewis col quale, tra la fine degli anni '70 e i primi anni '80, forma un gruppo chiamato Flyte Tyme, dal quale si evolveranno i The Time e quindi i The Original 7ven, gruppo spalla di Prince.
Nel 1982 i due si sono avviati nell'attività di produzione tramite Dick Griffey e la SOLAR Records. Negli anni seguenti, precisamente nel 1991, hanno fondato una propria etichetta, la Perspective Records, che si è appoggiata per la distribuzione alla A&M Records. A Jimmy Jam e Terry Lewis fa riferimento anche la Flyte Tyme Records.