
Mit dem FC und dem damaligen Trainer Hennes Weisweiler stieg er 1949 in die Oberliga West auf. Es sollten noch viele Erfolge werden: Westdeutscher Pokalsieger (1953, 1964), Westdeutscher Meister (1954, 1960, 1961, 1962, 1963), deutscher Meister 1962 und 1964, „Fußballer des Jahres” 1963.
Im Notizblock des damaligen Bundestrainers Sepp Herberger stand Schäfer schon lange vor seinem Debüt im Trikot des Deutschen Fußball-Bundes (DFB), bei dem er am 9. November 1952 in Augsburg gegen die Schweiz zweimal traf. Herberger schätzte den „Mitreißer” Schäfer als einen, der nie aufgab, nie resignierte, seine Mitstreiter immer wieder animierte.