Olümpiamängude jalgpalliturniiri peetakse alates 1900. aasta suveolümpiamängudest Pariisis.
Võistlusi ei toimunud 1896. ja 1932. aasta suveolümpiamängudel. Alates 1996. aasta olümpiamängudest Atlantas on kavas ka naiste jalgpall.
Jalgpalli ei olnud 1896. aasta suveolümpiamängude kavas. 1900. ja 1904. aasta võistlustel osalesid turniiril amatöörjalgpalliklubid, ja alles 1908. aasta olümpiamängudel toimus korralik jalgpalliturniir rahvusmeeskondade vahel.
Kahel esimesel korral võitis olümpiamängud Suurbritannia jalgpallikoondis, alistades mõlemal korral finaalis Taani jalgpallikoondise.
Sellest alates on jalgpall olnud kõigi suveolümpiamängude kavas, turniiri ei peetud vaid 1932. aasta suveolümpiamängudel Los Angeleses.
Kuni 1928. aastani olid olümpiamängud ainus rahvusvaheline tiitliturniir koondistele, alles 1930 peeti Uruguays esimesed maailmameistrivõistlused. Elukutselistel jalgpalluritel oli olümpiamängudel osalemine keelatud ja sõjajärgsetel mängudel (1952–1980) domineerisid seetõttu Ida-Euroopa riikide niinimetatud amatöörid. Kokku on olümpiavõitja selgitatud 20 korda.
1984. aastal lubati ka profid esimest korda platsile, kuid FIFA nõudel võisid kaasa teha vaid need pallurid, kes polnud mänginud MM-võistluste valik- ega finaalturniiridel.
Alates 1992. aasta Barcelona olümpiamängudest sätestati reegel, et 18 mängijast 15 peavad olema 23-aastased või nooremad. Naiste seas on kehtestatud vanuse alampiir – kaasa tohib teha mängija, kes saab olümpia-aastal vähemalt 16-aastaseks.
1920. aasta olümpiamängude jalgpalliturniiri finaali ajal lahkus Tšehhoslovakkia väljakult 43 .minutil 2-0 eduseisus Belgia vastu ja diskvalifitseeriti. Hõbemedali lisamängus võitis Hispaania Hollandi vastu 3-1.
1972. aasta olümpiamängude jalgpalliturniir mängiti uute reeglite järgi, et kui matš lõpeb isegi pärast lisaaega viigiga, jagatakse medalid. Pronksimatšis see reegli muudatus mõjutas matši negatiivselt. Pronksimäng Nõukogude Liidu ja Ida-Saksamaa vahel läks pärast tegelikku mänguaega lisaajale ning lisaajal ajal ei soovinud kumbki meeskond oma medalipositsiooni ohtu seada. Kuigi pealtvaatajad vilistasid ja polnud mängu käiguga rahul, otsustasid meeskonnad mitte rünnata ja matši lõpuks anti pronksmedalid mõlemale meeskonnale.