En la década de los 70 se tocó fondo al descender a la Tercera División en la temporada 1973/74, que en ese momento era la categoría de bronce del fútbol español al no existir Segunda División B, actualmente Primera Federación. Desde la temporada 57/58 a la 61/62 el club permanece en Segunda División, rozando el descenso primero (en la 57/58 se salva del descenso a Tercera al derrotar al Club Deportivo Ourense en la promoción) y peleando por el ascenso después (se queda a 2 puestos de la promoción de ascenso en la 59/60 y a uno solo en la 60/61, para acabar ascendiendo en la 61/62 como campeón de la Segunda División).
