Armfield je v šestdesetih in sedemdesetih letih zbral 43 nastopov za Anglijo in bil 15-krat njen kapetan. Leta 1966 je bil tudi na seznamu igralcev za ekipo, ki je pozneje osvojila edini naslov svetovnih prvakov za Anglijo doslej, toda zaradi poškodbe na prvenstvu nato ni zaigral.
Na klubski sceni je vsa leta kariere, odigral jih je 17 (1954-1971), ostal zvest Blackpoolu in zanj zbral 627 tekem. Po igralski upokojitvi je kot trener vodil ekipi Bolton Wanders in Leeds United, s slednjo je leta 1975 prišel v finale evropskega pokala.
Pozneje je deloval kot komentator na BBC, bil pa je tudi svetovalec združenja angleških poklicnih nogometašev (PFA).
"Zelo nas je prizadela vest o Jimmyjevi smrti. Ni imel velikega vpliva samo v Blackpoolu, za Anglijo je odigral veliko tekem in tudi po koncu kariere je vedno rad pomagal na številnih področjih," je dejal predsednik FA Greg Clarke.
