Swoją karierę piłkarską Wagué rozpoczynał w klubach Les Andelys, Romilly Pont Saint-Pierre i FC Rouen. W 2006 roku podjął treningi w SM Caen. W 2011 roku awansował do kadry pierwszej drużyny. 6 listopada 2011 zadebiutował w Ligue 1 w wygranym 3:0 domowym meczu z Dijon FCO. 19 listopada 2011 w zremisowanym 2:2 wyjazdowym meczu z AC Ajaccio strzelił swojego pierwszego gola w lidze. Na koniec sezonu 2011/2012 spadł z Caen do Ligue 2.