В апреле 1950 г. генерал В. Ф. Маргелов получает новое высокое назначение: он становится командиром 37-го гвардейского Свирского военно-десантного корпуса, дислоцируемого на Дальнем Востоке. Из Пскова семья Маргеловых, таким образом, перебралась в противоположный конец Советского Союза. Жилищные условия семьи командира Свирского корпуса ВДВ оказались незавидными и стесненными. Из воспоминаний полковника А. В. Кукушкина: «Скромно жил и комкор Маргелов В. Ф. Он занимал половину одноэтажного барачного типа строения напротив штаба корпуса. Оно отличалось от других тем, что было обнесено двухэтажным дощатым забором. Жена его, Анна Александровна, симпатичная женщина, работала врачом в гарнизонной поликлинике, слыла хорошим специалистом, поэтому попасть к ней на прием считалось престижным» [20, с.313].
В начале 50-х гг. Александр и Василий Маргеловы становятся школьниками, проявив уже тогда достаточно хорошие способности. О ранней школьной поре он вспоминает так: «Перевели отца по службе в 37-й корпус ВДВ в Белогорск. Природа там великолепная, а вот времена года менялись каждый день: сегодня лето, жара, а завтра – зима, снег. Морозы до -30>0С переносились легко. Занятия в школе никогда не отменяли. Рядом была великолепная река Томь. Мы туда на экскурсию и футбол гонять ходили. Это был первый и второй класс. Дети военнослужащих очень часто меняли школы, могли закончить 1-й класс в одной, а 2-й уже в другой. Это было связано с частыми переездами родителей. Отчётливо помню, как звали классного руководителя в 1 классе – Ольга Ивановна, а во 2-м классе —Панна Фоминична» [15].
Воспитание в семье знаменитого генерала, Героя Отечественной войны и высокопоставленного командира-десантника непосредственно повлияло на становление сильного характера у близнецов-братьев ещё в детские годы. Штаб 37-го корпуса ВДВ находился в г. Белогорске (до 1957 г. – Куйбышевка-Восточная), районном центре Амурской области. Там же и располагалась скромная резиденция семьи Маргеловых. По признанию А. В. Маргелова, его, мальчишку 7—8 лет, поначалу пыталась третировать местная шпана, которая презрительно относилась вообще к детям офицеров. Во время одной из таких «разборок» Саша Маргелов был окружен хулиганьем, но не испугался и хотел решить вопрос миролюбиво. Кто-то из хулиганов нанёс смелому пацану удар палкой с гвоздём. Пролилась кровь, но Маргелов-младший вышел из ситуации достойно, как и подобает сыну боевого генерала.