Первые шаги в спорте начались с бокса. Но, на первом же соревновании, мой высокорослый соперник весь первый раунд жестоко избивал меня, но на втором я послал его в нокаут. Потом я узнаю, что наш бой был «неразыгранным» и меня не допустили во второй круг. Тренер заявил, что я нарушил какую-то «установку», используя силу. В вольной борьбе тренер заставлял на соревнованиях проигрывать более слабому сопернику. По самбо и дзюдо у меня не было тренера. Но мастером спорта по вольной борьбе, самбо и дзюдо, я стал самостоятельно, хотя тренера получали за мои успехи премии (раньше в СССР платили). Таким образом, я занимался единоборствами с 9 до 33 лет. Последним официальным соревнованием было участие в Чемпионате Москвы- 80, где мне в 31 год удалось стать призёром на олимпийском ковре по самбо.
Проработав тренером, сначала по самбо, а потом по дзюдо более 22 лет, мне поступило предложение стать главным тренером СССР по дзюдо среди инвалидов по зрению. В 1988 году искали тренера по дзюдо, имеющего знания по вольной борьбе и добившегося успехов в дзюдо. Под этот критерий я и подошёл, поскольку инвалиды по зрению занимались классической или вольной борьбой. А я к этому времени проработал тренером по дзюдо более 15 лет, окончил Педагогический институт на кафедре физического воспитания, и воспитал десяток мастеров спорта по дзюдо и самбо.
Занятия со Сборной на татами я проводил в Центральном доме культуры Всероссийского Общества слепых. В двух комнатах, оборудованных под тренажёрный зал, тренировал своих дзюдоистов. Однажды в зал вошёл уже немолодой мужчина на костылях и предложил с ним побороться на руках. Когда все присутствующие, в том числе и я, ему проиграли, мы познакомились с моим обидчиком. Иван Фёдорович Овчинников оказался армрестлером, участником международного турнира «Золотой медведь».
Он рассказал, что несколько инвалидов с поражением опорно-двигательного аппарата приняли участие в турнире, где все, а это были москвичи, проиграли.
И организатор турнира Ахмедшин Игорь Геннадьевич поручил Ивану найти тренера и начать тренировки по армрестлингу, поскольку в начале 90-х годов этот вид спорта в СССР был не развит, тем более с инвалидами никто не работал. Игорь Геннадьевич поручил мне подготовить команду на «Золотой медведь».
Так я, не зная этого вида спорта, стал тренером по армрестлингу.
Армрестлингом увлёкся уже в 40 лет и наиболее впечатляющих результатов добился именно в этом виде спорта. За свою спортивную карьеру Виктор Зайцев 20 раз становился чемпионом России, 8 раз — чемпионом Европы и 5 раз — чемпионом мира.
