2004 : Les frères Polycarpe (Xavier et Vincent) forment le groupe Gush avec leur cousin Mathieu Parnaud et Yan Gorodetzky.
2007 : Ils sortent un EP 4 titres intitulé « Rocking for my children ».
2009 : Ils assurent les premières partie de –M-, Julien Doré, Hugh Coltman ou encore Yodelice.
2010 : Ils sortent leur premier album « Everybody’s God ».
2014 : Ils sortent l’album « Mira ».

Xavier : « On trouve que Gush est un mot qui sonne bien et qui est simple. Nous voulions avoir le nom d'un groupe qui soit court et qui sonne presque comme une onomatopée. Gush veut bien dire 'jaillissement', mais on pourrait donner pleins de sens différents à ce mot. Pour nous, cela signifie davantage un jaillissement d'énergie. D'autres pourraient l'interpréter comme un jaillissement musical. » (jenzinemagazine.com, janvier 2010)