L’Américaine dispute sa première finale olympique du 100 m à Montréal 1976 a seulement 19 ans, elle termine 5ème. Elle ne participe pas aux Jeux de Moscou qui sont boycottés par les États-Unis. Mais à Los Angeles 1984, Evelyn Ashford obtient sa revanche et sa première médaille d’or sur 100 m en même temps qu’elle accompagne le relais Américain sur la plus haute marche du podium. Les Américaines pulvérisent leurs rivales Est-allemandes qui terminent plus d’une seconde derrière elle. Jamais une telle différence n’a été faites lors d’une finale olympique.

Quatre ans plus tard à Séoul, Evelyn Ashford est porte-drapeau de l’équipe américaine. Elle est médaillée d’argent sur la distance des 100 m et remporte une nouvelle médaille d’or lors du relais 4×100 m. À Barcelone à 35 ans, elle est encore membre de la sélection américaine et s’impose pour la troisième fois consécutive avec le relais américain du 4×100 m.

En 1997, Ashford a été intronisée au Temple de la renommée de l’athlétisme national.