Bei den Kongresswahlen des Jahres 2002 wurde Cardoza im 18. Wahlbezirk von Kalifornien in das US-Repräsentantenhaus in Washington, D.C. gewählt, wo er am 3. Januar 2003 die Nachfolge von Gary Condit antrat. Nach vier Wiederwahlen konnte er sein Mandat im Kongress bis zu seinem Rücktritt am 14. August 2012 ausüben; zuvor hatte er bereits angekündigt, im November dieses Jahres nicht erneut zu kandidieren. Für kalifornische Verhältnisse gilt er als konservativer Demokrat. Er war zuletzt Mitglied im Landwirtschaftsausschuss und im Auswärtigen Ausschuss sowie in vier Unterausschüssen. Eine Nachwahl um Cardozas Mandat wurde nicht angesetzt.
