Реформировать устаревший образ монархии всячески пытался принц Филипп. Он, например, завел обычай устраивать неофициальные обеды, где королева могла бы знакомиться с людьми из «другого», незнатного мира. Впрочем, сам он в близости к народу зашел слишком далеко и вместе со своим секретарем и другом Майклом Паркером оказался посетителем известного «Четвергового клуба» барона Ноэма, где царила довольно неприличная атмосфера. Любовь принца к вольным шуткам увеличивала подозрения прессы; как-то на банкете в честь голландского принца Бернхардта Филипп шутливо упал на колени и воскликнул: «Какой вы счастливый! Вас никто не знает в лицо, и вы можете заводить романы с кем угодно. А за мной повсюду ходят шесть телохранителей». За ним и в самом деле везде следовала охрана, тем самым лишая физической возможности изменить супруге. Однако Елизавета все равно была недовольна и в свойственной ей мягкой, но настойчивой форме потребовала от супруга прекратить визиты в «Четверговый клуб». Позже принц благодарил за это судьбу — в числе завсегдатаев клуба оказались советские шпионы.

Филипп утешился, занимаясь множеством дел в организациях, связанных с его любимыми техникой и спортом. Он возглавляет Промышленное общество, Британскую ассоциацию развития науки, Центральный совет физического образования, Фонд спасения диких животных и еще множество советов, комитетов и фондов. Со своим острым умом и взрывным характером он все же постоянно находится в тени своей супруги, хотя она всегда старалась компенсировать это. Герцог Эдинбургский получил титулы, воинские звания и столько наград, что они не умещаются на его мундире. Приехав как-то в Бразилию, он ради шутки спросил местного командующего флотом, не заслужил ли тот свои ордена в морских баталиях на искусственном пруду в новой столице Бразилиа. «Да, сэр, — не растерялся бразилец, — но зато не благодаря женитьбе».

Отодвинув мужа от дел государства, Елизавета поручила ему воспитание детей, что оказалось не лучшим решением. Сама она была неважной матерью из-за вечной занятости и отсутствия необходимой в данном случае нежности. Детям она отводила час утром и час вечером во время купания; в остальное время ими занимались все те же шотландские няни. А вот Филипп, пользуясь относительной свободой, проводил с детьми много вечеров, играл с ними в прятки и читал вслух. Однако и он часто бывал занят, поэтому Чарльз и Анна редко видели родителей даже на своих днях рождения. Чарльз рос пугливым, необщительным мальчиком; он рано привык к тому, что «у мамочки очень важная работа» и он должен оставаться один. Вернувшись из шестимесячного путешествия по странам Содружества, Елизавета пожала руки всем министрам и лишь потом обняла сына, дав ему тем самым первый урок поведения на публике. Друзей у него не было, и даже с собственной сестрой он держался отчужденно. У принцессы Анны было гораздо больше силы воли и энергии, и она своими проказами как-то пугала старшего брата.

В 1957 году наследник престола впервые в истории английской монархии пошел в обычную начальную школу Хилл-хаус. Это было новомодное учебное заведение со свободной программой, где отсутствовали принятые в Англии до сих пор телесные наказания. Там Чарльзу нравилось, хотя за ним толпой ходили журналисты и просто зеваки. Однако скоро его перевели в частную школу Чим с порядками, типичными для таких учреждений. Тихого, стеснительного принца дразнили «девчонкой» и старались посильнее вывалять в грязи на уроках физкультуры. Издевательства не прекратились даже после того, как в следующем году Чарльза провозгласили принцем Уэльским. Жаловаться матери он боялся, к тому же ей все равно было некогда. Королева опять была беременна, и 19 февраля 1960 года родился принц Эндрю, ставший плодом окончательного воссоединения супругов после долгой разлуки — Филипп на полгода уходил в плавание. Однако это был не последний ребенок в семье — весной 1964 года, когда королеве было уже под сорок, появился на свет принц Эдвард.