Armfield, występujący na boisku jako prawy obrońca, zagrał 43 razy w reprezentacji Anglii - 15 razy wychodził na murawę jako kapitan zespołu. Był członkiem kadry Anglii na mistrzostwa świata w 1966 roku, kiedy drużyna "Lwów Albionu" jedyny raz w historii wywalczyły mistrzostwo świata.
Przez całą piłkarską karierę Armfield był wierny barwom Blackpool - piłkarz rozegrał dla tego klubu 627 razy strzelając sześć goli. Przez dziesięć lat był kapitanem drużyny. W Blackpool przez pewien czas Armfield grał razem z legendarnym sir Stanleyem Matthewsem.
Po zakończeniu piłkarskiej kariery Armfield był trenerem Leeds i Bolton Wanderers. Potem pracował dla angielskiej Federacji Piłkarskiej (FA), pracował także jako dziennikarz sportowy.