13 июля 1944 г. при переправе подразделений 31-я гвардейской стрелковой Витебской ордена Ленина Краснознамённая ордена Суворова дивизии через реку Неман, гвардии старший сержант Рыцарев Анатолий Васильевич проявил геройство и мужество. Он один из первых под огнем противника переправился через реку, установил и поддерживал бесперебойную связь с наступающими частями, обеспечивая своевременное управление боем.

23-24 июня 1944 г. при прорыве обороны противника в районе Остров. Юрьев, гвардии старший сержант Рыцарев Анатолий Васильевич был заместителем командира направления связи от 95 псп на КП командира дивизии. В течении двух дней боев гвардии старший сержант Рыцарев проявил себя мужественным и отважным командиром. Под сильным обстрелом со стороны противника, постоянно рискуя своей жизнью, он все время находился среди своих подчиненных и своим примером увлекал их на самоотверженную работу. В результате связь на его участке работала бесперебойно, что содействовало успешному выполнению боевой задачи по прорыву обороны противника.

В боях с 4 по 10 января 1944 г. в районе деревни Матрасы, Ковалево, озера Зарановского городского района Витебской области гвардии старший сержант Рыцарев Анатолий Васильевич, будучи старшим телефонистом на КП командира 95 гсп в сложных условиях боя сумел обеспечить бесперебойную с КП командира дивизии и с наступающими батальонами. В ночь с 4 на 5 января он рискуя жизнью лично восстановил порванную связь в трех местах. В бою за полуостров на озере Зарановское он лично под перекрестным минометным и пулеметным огнем противника в течении длительного времени устронял прорывы на линии, чем обеспечил бесперебойное управление боем.