Отец Дианы был типичным представителем своего времени и класса. Он учился в Итоне, был офицером Королевского полка шотландских гвардейских драгун. Семейные связи помогли ему получить и удержать должность конюшего при короле Георге VI и королеве Елизавете ЧП. В 1953 году он сопровождал королеву в поездке по странам Содружества после коронации. К тому времени он уже обручился с Фрэнсис. Они поженились 1 июня 1954 года. Грандиозная светская свадьба проходила в Вестминстере. Присутствовала тысяча гостей, в том числе королева, герцог Эдинбургский, королева-мать и принцесса Маргарет. Молодожены были страстно влюблены друг в друга, но их положение с самого начала было неравным. Фрэнсис пришлось оплатить свадьбу. Джонни, которого командир его полка называл человеком «очень милым, но очень глупым», попытался стать банкиром, однако старый приятель и партнер положил конец этим попыткам, заявив, что «математика никогда не была его сильной стороной». Затем он поступил в Королевский сельскохозяйственный колледж в Киренчестере – традиционное место учебы для богатого землевладельца и аристократа. Сначала супруги жили в Родмартоне, в графстве Глостершир, где снимали небольшой коттедж, а потом поселились в Орчард-Коттедж в Олторпе – практически рядом с Веселым Джеком.
В 1955 году умер отец Фрэнсис, Морис Фермой, и его вдова Рут предложила супругам переехать к ней и арендовать Парк-хаус. Тогда же Фрэнсис, унаследовав свою долю отцовского состояния, решила купить для Джонни в соседнем Снеттисхэме ферму площадью 600 акров за 30 тысяч фунтов. Джонни занимался фермерством в Снеттисхэме и на фамильных землях в Норт-Крике, присматривал за своими благотворительными организациями, в частности принимал участие в работе Национальной ассоциации клубов для мальчиков, а Фрэнсис озаботилась продолжением рода. Ее задача была родить мальчика-наследника, но первые двое детей оказались девочками. В марте 1955 года, через девять месяцев после свадьбы, родилась Сара, а в феврале 1957 года – Джейн. После этого у Фрэнсис случился выкидыш. Когда же 1 января 1960 года родился желанный сын, это событие стало для семьи не счастьем, а трагедией. Джон Спенсер появился на свет с врожденным уродством, не мог дышать и умер через десять часов после рождения. Ребенка у Фрэнсис забрали, не дав даже прикоснуться к нему. Эта боль навсегда осталась в ее душе.