В семье графа Петра Александровича и графини Екатерины Михайловны Румянцевых 3 апреля 1754 года родился сын Николай Румянцев, которому судьба сулила большую будущность. Через одиннадцать месяцев, 17 марта 1755 года, родился третий сын Сергей. Старшему сыну Михаилу было уже четыре года, а дочь Татьяна, первый ребенок супругов, прожила недолго, заболела и скончалась. Но только на первых порах брак молодых Румянцевых складывался удачно, потом началась обычная походная, да и разгульная жизнь Петра Александровича.
Он был «красив собою, умен, любим женщинами», вспоминают современники о Петре Румянцеве, как полковник успешно продвигался в военной карьере. Петр Александрович принял участие в Семилетней войне с Пруссией, получил звание генерала, участвовал во многих сражениях, потом осадил и взял крепость Кольберг, за успехи в войне сразу стал генерал-аншефом, после войны долго не возвращался в Петербург, увлекшись одной дамой из Данцига, и молодой княгине пришлось довольствоваться тем, что полностью поглотили семейные дела, воспитание и образоваие троих сыновей.
Дети получали домашнее образование: то у них был артиллерийский подполковник, то майор прусской армии, родом из Швейцарии, то немец Цвилер, то Лайонс, но, кажется, только француз Моно оказал существенное влияние на детей графа Румянцева. По словам биографа, Николай Румянцев показал хорошие способности в математике, но главное – детей учили европейским языкам и латинскому. С детских лет Николай и Сергей брали уроки верховой езды, танцев, фехтования. Они получили все, что полагалось. Сохранилось письмо француза Моно графу Петру Румянцеву, в котором он высоко отзывается о своих учениках, обещая им большую и высокую судьбу.
Графиня Екатерина Михайловна Румянцева, семейная жизнь которой не заладилась, была вынуждена уехать с детьми в Москву. Нужна была настоящая любовь и преданность графу и детям, чтобы семья не развалилась окончательно. В письмах Петру Александровичу она докладывала о своих хозяйственных заботах, о посещении ее общими знакомыми, о детях, жаловалась на нехватку денег…
Николай, записанный в лейб-гвардии Конный полк, был переведен по предложению графа Брюса, женатого на Прасковье, сестре Петра Румянцева, в лейб-гвардии Семеновский полк, где вскоре получил чин прапорщика, затем адъютанта полка.