По окончании войны, бедный кардинал вернулся в Толедо, и сеньор Эстабан умилился, глядя на его грустное детское лицо. Он вернулся, упавший духом, после свидания в Мадриде со своим племянником Фердинандом VII. Другие члены регентства были в тюрьме или в изгнании, и он избежал этой участи только благодаря своей митре и своему имени. Несчастный прелат думал, что поступил хорошо, соблюдая интересы своей семьи во время войны; и вдруг его же стали обвинять в либерализме, в том, что он враг церкви и престола; он никак не мог понять, в чем заключалось его преступление. Бедный кардинал тосковал в своем дворце, употребляя свои доходы на украшение собора, и умер в начале реакции 1823 года. Место его досталось Ингванцо, трибуну абсолютизма, прелату с седеющими бакенбардами, который, будучи избран в кортесы в Кадиксе, сделал карьеру тем, что нападал на всякие реформы и проповедовал возврат к австрийской политике, говоря, что это – верное средство спасти страну.
Добродушный садовник относился с одинаковым восхищением и к бурбонскому кардиналу, которого ненавидели короли, и к прелату с бакенбардами, который наводил страх на все епископство своей суровостью и своей грубостью бешеного реакционера. Всякий, кто занимал толедский епископский престол, был в глазах садовника Эстабана идеальным человеком, действия которого не подлежат критике. Он не желал слушать каноников, которые, покуривая папиросы у него в саду, говорили о причудах сеньора де Ингванцо, враждебно настроенного против правления Фердинанда VII, потому что оно не было достаточно «чистым», и потому что из страха перед иностранцами оно не решалось восстановить спасительную инквизицию.
Одно только огорчало садовника: дорогой его сердцу собор приходил в сильный упадок. Доходы архиепископства и собора сильно сократились во время войны. Случилось то, что бывает при наводнениях: вода, отступая, уносит с собой деревья и дома, и земля остается опустошенною. Собор утратил много принадлежавших ему прав. Арендаторы церковных земель, пользуясь государственными невзгодами, превратились в собственников; деревни отказывались платить феодальные подати, точно привычка защищаться и вести войну освободила их навсегда от вассальных повинностей. Кроме того, сильно повредили собору кортесы, уничтожившие феодальные права церкви; этим отняты были у собора огромные доходы, приобретенные в те времена, когда толедские архиепископы надевали воинское облачение и шли сражаться с маврами.