1933 wurde er wegen seiner jüdischen Herkunft vertrieben und ging als Kapellmeister in die Tschechoslowakei an das Stadttheater nach Aussig. Die Sudetendeutschen Nazis vertrieben ihn 1938 auch dort, und Allers floh in die Vereinigten Staaten. Zunächst schlug er sich als Klavierlehrer durch und begleitete die Ballets Russes de Montecarlo auf Tourneen. Ab 1946 gelang ihm eine Broadway-Karriere und er dirigierte die Uraufführungen einer Reihe Musicals von Alan Jay Lerner und Frederick Loewe, so Brigadoon (1947) und Paint Your Wagon (1951). Am 15. März 1956 leitete er die Uraufführung von My Fair Lady am Broadway und 1961 auch die Premiere der deutschen Fassung im Theater des Westens Berlin.
Nachdem die Zusammenarbeit von Lerner und Loewe 1962 geendet hatte, kehrte Allers 1973 nach Deutschland zurück, wo er noch bis 1976 Chefdirigent des Gärtnerplatztheaters war. 1974 war im TV-Film der Operette Die schöne Helena in prominenter Besetzung als Regisseur und Conférencier tätig.[1] Seinen Wohnsitz hatte er in München, als er 89-jährig auf einer Reise nach Kalifornien verstarb.
Hannes Heer; Jürgen Kesting; Peter Schmidt: Verstummte Stimmen. Die Bayreuther Festspiele und die „Juden“ 1876 bis 1945. Eine Ausstellung. Festspielpark Bayreuth und Ausstellungshalle Neues Rathaus Bayreuth, 22. Juli bis 14. Oktober 2012. Metropol, Berlin 2012, ISBN 978-3-86331-087-5, S. 339, S. 385.
Joseph Walk (Hrsg.): Kurzbiographien zur Geschichte der Juden 1918–1945. Hrsg. vom Leo Baeck Institute, Jerusalem. Saur, München 1988, ISBN 3-598-10477-4.
Fred K. Prieberg: Handbuch Deutsche Musiker 1933–1945. CD-ROM-Lexikon, Kiel 2009, 2. Auflage, S. 128. online