Han deltok i «Ekstralekene» 1906 i Athen, og var der med på det laget som vant Norges første OL-gull gjennom historien. Det ble først arrangert en kvalifiseringskonkurranse i Oslo, der 21 av de 30 deltakerne kvalifiserte seg til å delta i olympiaden.
Stumpf var slaktersvenn, og var sønn av den tsjekkiske slakteren og pølsemakeren Leopold Ladislav Stumpf som hadde flyttet til Norge. Selv om turnøvelsene ble avholdt 22. – 23. april var han ikke tilbake i Kristiansand før 15. mai. De ble først møtt av 10 000 mennesker i Christiania (Oslo), og da han ankom Kristiansand med dampskipet «Ryfylke» ble han på nytt feiret med faner og tale av turnforeningens formann.
I tillegg til turn har han et NM-gull fra 1897 i spydkast.[1]