Детство прошло по военным гарнизонам, где служил отец. В 1940 году после окончания войны с Финляндией с семьёй переехал в Сортавала. Жили в гарнизоне, почти у каждого мальчика была своя лодка, и на них ребята совершали походы по Ладожскому озеру. Вскоре узнали, что на острове Валаам есть школа юнг, и Вениамин решил обязательно туда поступать. Но мечтам помешала Великая Отечественная война. Уже через пять дней семьи военнослужащих эвакуировали в Ленинград, а затем на Урал, в Пермь. Осенью 1941 года поступил на работу в авиационные мастерские, получил специальность слесаря — монтажника и уже слыл стахановцем. Отец был на фронте, а мать работала на заводе. После школы юнг чистили от мин Днепр в районе Киева.