En 1980/81 les ennuis commencent. Et oui, la gloire finit par avoir un prix. 3ème club d’aquitaine, 2 équipes en nationale, le Handball Club Montpon s’essouffle d’un point de vue financier ; le porte-monnaie, insuffisamment musclé, engendre des conséquences sur les performances sportives. Les équipes descendent puis de l’entente avec Vélines on se dirige vers la mésentente. Cela dit, réputé pour sa persévérance, le club de Montpon ne se laisse pas « démonter ».
En 1987, le travail de formation des jeunes paye et c’est le point d’embellie. Le club fusionne avec LIBOURNE. En 1989 un nouvel entraîneur arrive : le Yougoslave Dragan ZOVKO. Il remplace Michel COUSSET qui lui devient manager. L’aventure se poursuit…