Поженившись достаточно рано по тем временам, супруги Брянчаниновы вскоре вынуждены были оставить столицу и переехать на постоянное жительство в родную Вологодскую губернию. Это произошло в связи с тем, что Александр Семенович унаследовал от отца поместье, обремененное долгами. Он вынужден был уйти в отставку и заняться хозяйством.
Александр Семенович оказался очень успешным помещиком, всего через несколько лет он не только очистил поместье от долгов, но и стал получать от него значительный доход, благодаря которому в своем селе Покровском Брянчанинов «создал маленький Версаль с замком-домом, царственным садом и изящной церковью». Но несмотря на все это великолепие и взаимное согласие, первые годы брака Брянчаниновых были омрачены сначала смертью новорожденных близнецов, а затем и долгой бездетностью.
Скорбя об этом, супруги Брянчаниновы обратились к Богу, предприняв паломничество по окрестным святым местам: Свято-Духовскому, Глушицкому, Лопотову, Прилуцкому монастырям. Бог услышал их молитвы, и 5 февраля 1807 года у них родился сын, в святом крещении названный Дмитрием – в честь преподобного Димитрия Прилуцкого, одного из самых почитаемых Вологодских святых. Впоследствии у супругов Брянчаниновых родилось еще шестнадцать детей, из которых выжили девять.
Детство в родительском доме
Детские годы, проведенные будущим святителем в родительском доме, нельзя назвать счастливыми. Как писал впоследствии он сам: «Детство мое было преисполнено скорбей. Здесь вижу руку Твою, Боже мой! Я не имел, кому открыть моего сердца: начал изливать его пред Богом моим, начал читать Евангелие и жития святых Твоих. Завеса, изредка проницаемая, лежала для меня на Евангелии; но Пимены Твои, Твои Сисои и Макарии производили на меня чудное впечатление. Мысль, часто парившая к Богу молитвой и чтением, начала мало-помалу приносить мир и спокойствие в душу мою. Когда я был пятнадцатилетним юношей, несказанная тишина возвеяла в уме и сердце моем. Но я не понимал ее, я полагал, что это обыкновенное состояние всех человеков».
В семье Брянчаниновых царил строгий, даже суровый строй жизни, регламентируемый отцом, железной воле которого никто не смел прекословить. Дети настолько боялись отца, что в его присутствии не решались высказывать самые безобидные пожелания. Само проявление к детям любви считалось недостойной слабостью, розги не щадили ни старших, ни младших. За поведением детей тщательно наблюдали и каждый день докладывали Александру Семеновичу.