Édesapja gróf Zichy Gábor (1827–1899), édesanyja báró Sophie von Vittinghoff gt Schell zu Schellenberg (1824–1912).[2] A Komárom vármegyei Szentpéteren született a nagy múltú Zichy családba. Tanulmányait szülőfalujában, Pozsonyban illetve Ausztriában végezte, majd beiratkozott a morvafehértemplomi lovas-hadiapródiskolába, melynek elvégzése után a 11. huszárezredbe osztották be. 1889 és 1892 között Frigyes főherceg udvarában szolgált, majd 1894-ben főhadnagyi rangban leszerelt és hazament szentpéteri birtokára gazdálkodni. Ott virilista jogon a Komárom vármegyei törvényhatóság tagja lett, melynek ügyeiben aktívan részt vett a függetlenségi oldalon.
