Det skulle vise seg at degraderingen fra landsdelsserien (2. divisjon) i 1958 ble innledningen til en lang rekke sesonger med spill i lavere divisjoner. Faktisk skulle denne perioden strekke seg over 17 år. På disse 17 sesongene hadde Rollon i perioder gode lag, men det lykkes ikke klubben å ta steget opp igjen. På grunn av en omlegging av seriesystemet ble den lokale 3. divisjonsavdelingen raskt omgjort til en 4. divisjonsavdeling. De lange årene i 4. divisjon inneholder likevel høydepunkter som vil bli husket i klubbens historie.
Etter nedrykket i 1958 var det klart for et generasjonsskifte på A-laget. Sesongen 1959 ble det benyttet 27 spillere i løpet av lagets 26 kamper. Fasiten sier 10 seiere, 4 uavgjort og 13 tap. I 1960 stilte Rollon med divisjonens yngste lag, alle tre spillerne i halfrekka var 18 år. Resultatet var 11 seiere, 5 uavgjort og 6 tap på de 22 kampene laget spilte.
1961 ble et godt Rollonår. 26 kamper resulterte i 16 seiere, 5 uavgjort og 5 tap. Ved sesongslutt lå laget på 2. plass i serien, to poeng etter Velledalen & Ringen Fotballklubb. Thor Holen var lagets toppscorer med 20 mål. I 1962 spilte A-laget 24 kamper, vant 13, spilte 6 uavgjort og tapte 5. Det ble en 3. plass i serien, etter at VRF beholdt ledelsen fra høstsesongen. Herd passerte Rollon på tabellen og tok andreplassen. 1963 ble et svakere Rollonår og laget plasserte seg midt på tabellen. Laget ble slått ut i 2. kvalifiseringsrunde i cupen, etter tap for Løkken fra Trøndelag.
I 1964 fylte klubben 50 år, og jubileumsåret ble et meget godt år for A-laget. Rollon ble avdelingsmestere i 4. divisjon Sunnmøre. Dermed ble det kvalifiseringskamper for opprykk til 3. divisjon. Motstanderne var Nord-Gossen og Clausenengen. Rollon kom imidlertid til kort etter to jevne kamper, og måtte ta en ny sesong i 4. divisjon.
Men det var bedriftene i cupen som gjorde året spesielt minneverdig. I 1. runde ble Hødd overraskende slått 1-0. Oscar Tvedt scoret Rollons mål. I 2. runde var det arvefienden Aafk som var motstander. Også her gjorde Rollon forhåndstipsene til skamme og halte i land en kjærkommen 1-0 seier. Magne Holen scoret for Rollon. En bedre presang i jubileumsåret kunne Rollonfolket knapt tenke seg!
I anledning klubbens 50-års jubileum ble det arrangert en jubileumskamp på Aksla stadion. Motstander var Lokomotiva Zagreb fra Jugoslavia. 2000 tilskuere møtte opp for å se et forsterket Rollonlag i kamp. Men selv Kjetil Hasund, Sigbjørn Slinning, to spillere fra Viking og en keeper fra Frigg, Oslo på laget, kunne ikke hindre at Rollon tapte 0-7.
I 1965 kom Rollon på andreplass i serien, bak Velledalen & Ringen. Det var også VRF som i kvalifiseringsrunden sørget for at Rollon ikke nådde 1. runde i cupen. I 1966 ble det en 4. plass i serien. Igjen mislyktes forsøket på å kvalifisere seg til NM. Sykkylven slo Rollon i kvalifiseringsrunden. Rollons seniorer var nå inne i en downperiode. Dette viste seg i 1967 da laget bare ble nr. 5 i 4. divisjon. Også året 1968 ble bare en middels sesong for A-laget.
Men i disse årene hadde Rollon til gjengjeld meget gode gutte- og juniorlag, unge spillere som få år senere skulle gi seniorlaget et nødvendig løft. I 1967 ble både gutte- og juniorlaget Kretsmestere.
Allerede i 1969 var det klart for et generasjonsskifte på seniornivå. 9 spiller på A-laget var under 20 år dette året. Av årets 20 kamper endte 10 med seier, 6 uavgjort og bare 4 med tap. Dette holdt til en andreplass i serien. Samme plassering oppnådde laget i 1970, under sin nye trener Arnfinn Gjerde. Statistikken forteller om 13 seiere, 3 uavgjorte og 9 tap på 25 kamper. Igjen ble Rollons juniorlag Kretsmestere.
I 1971 ble Rollons unge lag Kretsmestere i 4. divisjon. Her finner vi mange profiler som skulle prege Rollonlaget i årene fremover, dette var spillere som var fostret opp i klubben og som var kretsmestere på gutte- og juniornivå.

Kretsmestere 1971. Bak fra venstre: Jens Olsvik, Dagfinn Fredriksen, Torgeir Aasen, Oscar Tvedt, Knut Strømsheim, Roar Pedersen, Svein Løvold, Gunnar Klemetsen og trener Arnfinn Gjerde. Foran fra venstre: Harald Røsand, Torbjørn Eidskrem, Nils Skuggen, Harald Thorsen, Arne Vadset, Finn Syversen og Vidar Olsen.
Dessverre ble Åndalsnes for sterke i kvalifiseringskampene, og Rollon måtte gå på enda en sesong i 4. divisjon.
Den påfølgende sesong ble et antiklimaks. Forventningene var høye, skuffelsene tilsvarende store. Etter en dårlig vårsesong lå Rollon en tid i nedrykksposisjon, men et krafttak på slutten av sesongen løftet klubben til midten på tabellen.
I 1973 var Einar Aas ny trener. På nytt kjempet Rollon for et opprykk. Helt til siste kamp hadde laget sjansen på Kretsmesterskap og nye kvalifiseringskamper for 3. divisjonsspill. I siste runde var Mauseidvåg motstander, Rollon ville ta mesterskapet i havn med seier. I stede var det Mauseidvåg som gikk av banen med 1-0 seier. Til tross for denne skuffelsen var sesongen som helhet et stort løft.
1974-sesongen ble nesten en repetisjon av den forrige. Rollon ledet serien lenge, men et par tap om høsten resulterte i en ren seriefinale i siste runde mot Aksla. Dette året var i tillegg kvalifiseringskamper om opprykk avskaffet, Romsdal og Nordmøre var slått sammen til en divisjon. Vinneren av kampen ville derfor gå rett opp i 3. divisjon! Ennå er det folk i Rollonmiljøet som ikke helt har kommet over denne kampen. Aksla vant 1-0 og rykket direkte opp, etter en scoring som kom etter lagets eneste sjanse gjennom hele kampen. Rollon dominert fullstendig og hadde en rekke sjanser, men uten å lykkes i å score.
Dermed skulle det bli enda et år i 4. divisjon for Rollon. Men det ble også den siste i rekken av 17 sesonger i skyggenes dal – 4. divisjon avd. Sunnmøre.
Kilder: Jubileumsheftet ”Sportsklubben Rollon 60 år”, Hans Kjetil Knutsen, 1974. ”Rapatetjing her kommer …” Glimt fra Rollons 75 årige historie, 1989.