90’ların başında Belle du Berry, Potzi ve François Jeannin ilk kez akustik retro-revü grubu Champêtres de Joie’nin üyeleri olarak bir araya gelmişler. Paris'in Belleville semtinde Berry Zebre sinemasında akustik performanslara sahne maceralarına başlamışlar. Ardından ünlü Fransız koreograf Philippe Decoufle ile işbirliği yapıp Albertville’de ki Kış Olimpiyatları’nın açılış töreninde sahne almışlar. Sonrasında da “La Belle Equipe” adını verdikleri gruplarıyla Paris çevresindeki kafelerde şarkı söylemeye başlamışlar.
Belle du Berry ve David Lewis ilk olarak 1994 yılında “Cabaret Sauvage “adlı müzikal kabare sirkinde tanışmış. İkiliye katılan Avustralya’lı müzisyenden kısa bir süre önce basçı Mano Razanajato'da ekibe katılarak Paris Combo grubu kurulmuş.
1995/7 yılları arasında Seine nehri çevresindeki lokaller ve kafelerde şarkı söyleyen topluluğun sesi Belle Du Berry, çoğunlukla Fransız aktris Arletty, 30’lardan Marie Dubas ve sürrealistlerden etkilendiğini hatta tarzlarında the B-52 gibi daha yakın tarihli grupların da etkisinin olduğunu belirtmiş. Potzi'nin Django etkilenimli gitarı François' nın ska ve latin soundu ile birleşirken büyüleyici bir karışım ortaya çıkmış. Daha önce Manu Dibango ve Arthur H gibi birçok farklı Fransız topluluklarıyla çalışan David Lewis gruba Paris’in kozmopolit atmosferini katmış.
