В четыре года Яков лишился отца. Эта невосполнимая утрата могла стать для юных сыновей Вильяма Романа и Якова определенным препятствием для уготованного продолжения военной карьеры и обустройства жизни в России. Но хорошо воспитанные шотландские отпрыски смогли снискать уважение и благосклонность при русском дворе. Немалую роль в их судьбе сыграл воевавший с отцом заслуженный российский генерал, бывший лорд Патрик Гордон, который к тому времени уже лет 30 жил в России. Прежде чем приехать сюда, он был лично известен королям Карлу и Иакову, приходился двоюродным братом губернатора Эдинбурга. Жизнь научила его придворной изворотливости, и долгое время он служил шведам против поляков и полякам против шведов.
От природы способный и энергичный, с хорошими связями на родине, именуемый в России Петр Иванович Гордон был признанным авторитетом шотландской колонии Немецкой слободы. Говоря по-русски и не гнушаясь выпить, он по праву пользовался известной популярностью и среди московской знати. Именно его протекция при дворе молодого царя Петра сыграла свою положительную роль и оба малолетних прекрасно воспитанных Брюсов, Роман и Яков, с 1683 года были приписаны к так называемым потешным войскам.
Патрик Леопольд (Пётр Иванович) Гордон
Многие достоинства и таланты этого незаслуженно забытого одаренного военачальника незримо были заимствованы и юными Брюсами.
Их дед, Джеймс Брюс, прямой потомок шотландских королей, в середине XVII века оставил родину, охваченную огнем Великой английской революции, и отправился искать счастья в далекую Московию, где он преданно служил царю и русской земле. Его сын Вильям или на русский манер Вилим также служил России и погиб под Азовом, когда его юные мальчики были совсем еще малыми детьми.
Старший сын Вилима – Роман, худой рыжеватый шотландец с тонкими поджатыми губами, через десяток лет вырос бравым воякой и очень достойно проявил себя на российской службе. А меньшему на два года, совсем не похожему на инородца Якову, с довольно мягким характером, доброжелательной улыбкой и пухлыми щеками, в силу своей одаренности и неординарности, уготовано было в дополнение к военным достижениям и просветительское предназначение. Знания, жадно впитанные с детства любознательным Яковом, пришлись очень кстати для раскрытия необычного организаторского таланта на благо России, в качестве военачальника, государственного мужа и разностороннего ученого.