Молодой писарь влюбился в хорошенькую и скромную камер-юнгферу (впоследствии жена его) и строил уже воздушные замки, как скоропостижная кончина императрицы опрокинула эти сооружения фантазии и покрыла будущность его неприязненным мраком; однако Дружинин не уступил поля сражения (не так, как мой отец, удалившийся из капитана артиллерии и адъютанта генерал-фельдцейхмейстера в провинцию титулярным советником). Как только император переехал во дворец, Дружинин, 22 лет (как и отец мой), явился в аванзалу и стал на свое место, среди бледных, растерявшихся вельмож. Кутайсов, преобразовавшийся из камердинера в камергера, приказал ему выйти, объяснив, что за смертию императрицы он уже не на службе. Дружинин отозвался, что он поставлен сюда высочайшим повелением и выйдет отсюда только по высочайшему повелению, и не вышел. Вслед за тем вошел угрюмый император, обвел глазами присутствующих и, останова взор на Дружинине, спросил гортанным, сиплым тоном: «Это кто?»
Кутайсов поспешил доложить, чем был Дружинин и какое он ему дал приказание, которого он не послушал. Павел осмотрел его грозно, но прежде чем он успел выговорить роковое слово, Дружинин простодушно и смело представил государю, что высочайшая власть не умирает, что этою властью он поставлен; ей одной он и вверяет свою участь.
«Мой секретарь!» – произнес император. Дружинин поклонился. «Правитель моей канцелярии», – прибавил Павел, и Дружинин остался при нем. Служба была нелегкая. С восьми часов утра до девяти часов вечера Дружинин и Кутайсов должны были оставаться близ кабинета его величества, но Дружинин мог двигаться по царской половине, а Кутайсов сидел весь день на стуле у дверей и держался за дверную ручку, так, чтобы по зову «Кто там!» в ту же секунду войти в кабинет и стать у дверей. Несмотря на такую службу, Дружинин не забывал своего сердца. Каждый вечер из Гатчины он скакал в Царское Село, где жила его невеста, просиживал с нею до утра и в четыре часа возвращался верхом в Гатчину, чтобы в восемь часов быть пред императором.
Умея принять вид отроческого простодушия, Дружинин приобрел право говорить с государем так смело, как никто не дерзнул бы. Государь, недоверчивый, озлобленный, был, кажется, доволен, что около него был человек первобытного чистосердечия, доходившего до младенческой наивности.