Yarmuth gick i skola i J.M. Atherton High School i Louisville. Han utexaminerades 1969 från Yale University. Han studerade 1971-1972juridik vid Georgetown University och var medarbetare åt senator Marlow Cook 1971-1974. Han grundade 1976 tidskriften Louisville Today som han utgav fram till 1982. Han grundade sedan 1990 den alternativa veckotidningen Louisville Eccentric Observer. Han sålde 2003 sin veckotidning.