אולימפיאדת 1980 נערכה במוסקבה, ברית המועצות. תחרויות הכדוריד נערכו בין ה-20 ביולי ל-30 ביולי. זו הייתה תחרות כדוריד הרביעית במשחקים האולימפיים. בתחרות השתתפו 248 ספורטאים (166 גברים ו-82 נשים). המשחקי הבתים נערכו במספר אתרים, משחקי הגמר נערכו ב"סוקולניקי ארנה".
בגלל החרם מספר נבחרות חזקות לא השתתפו בתחרות. בתחרות הגברים 6 נבחרות העפילו בהתאם לתוצאות אלופת העולם בכדורדי 1978. אומנם בגלל החרם, האלופה המכהנת נבחרת גרמניה המערבית ואלופי אפריקה (תוניסיה ואסיה (יפן) לא השתתפו. יתר שש נבחרות העפילו דרך המוקדמות.
12 נבחרות חולקו ל-2 בתים בהם נערכו משחקים בשיטת ליגה. שתי הנבחרות שסיימו במקום הראשון בכל בית נפגשו במשחק על מדליית הזהב ושתי הנבחרות שדורגו במקום השני בכל בית נפגשו במשחק על מדליית הארד.
בתחרות הנשים 4 נבחרות העפילו בהתאם לתוצאות אליפות העולם בכדוריד נשים 1978. מכיוון שהנבחרת המארחת כבר העפילה גם יוגוסלביה שהייתה החמישית באליפות העולם העפילה ישירות. זהות הנבחרת הנוספות הוברר בתחרות בין אלופי אסיה דרום קוריאה, אלופי אפריקה קונגו ואלופי אמריקה ארצות הברית. נבחרת דרום קוריאה ניצחה אך ויטרה על השתתפותה בגלל החרם. לכן לתחרות הגיע אלופת אפריקה.
