Con 14 años, entró como empleado doméstico en casa de los Pond. Unos amigos de esta familia que vieron sus dotes artísticas buscaron matricularlo en vano en escuelas de arte de Luisiana y finalmente lo admitieron en el Instituto de Arte de Chicago (1924-1928), donde estudió dibujo y escultura.[3]
Sus obras captaron la atención del mecenas de jóvenes artistas afroamericanos como Charles Maceo Thompson y expuso dos bustos en la exposición anual de la Chicago Art League en 1928.
Al año siguiente, se instaló en Nueva York y abrió un taller en Harlem granjeándose poco a poco cierta notoriedad. En 1946, Barthé fue nombrado miembro de la National Sculpture Society. Con la crisis tras la Segunda Guerra Mundial, se instaló en Jamaica, más tarde en Europa y finalmente en California, donde arruinado el actor James Garner lo ayudó financieramente y le encontró un apartamento en Pasadena, donde falleció.
Era homosexual declarado y parte de su obra está muy marcada por el homoerotismo.