Боксёр, его считают одним из величайших боксёров 1930-х годов.
За спортивную карьеру провёл 73 официальных боя, в 61 из которых одержал победы. Трижды становился сильнейшим боксёром страны (1933, 1938, 1939).
В 1932 и 1933 годах, выступая за спортивное общество «Строитель» становился чемпионом Москвы в легчайшем весе. Мастер спорта СССР (1936). В 1941 г. выступая за «Динамо» выиграл золотую медаль первенства столицы в рамках полулёгкого веса. Заслуженный мастер спорта СССР (1948). Участник Великой Отечественной войны.
Скончался А.И. Ксенофонтов 31 октября 1982 года, похоронен на Николо-Архангельском кладбище в Балашихе (ближнее Подмосковье), участок 1/11.