Взвешенная оценка А. А. Бирилева как государственного и военно-морского деятеля довольно непростое дело. Плавал он сравнительно мало, за первые 25 лет службы в офицерских чинах он находился в море по цензовому счету всего 4 года. Для сравнения, Роберт Николаевич Вирен, который в начале войны с Японией командовал крейсером 1 ранга «Баян», а после боя в Желтом море возглавил остатки 1-й Тихоокеанской эскадры, запертые в Порт-Артуре, за 17 лет после выпуска из Морского корпуса 10 лет провел на палубе корабля. Зато иностранные награды сыпались на А. А. Бирилева как из рога изобилия: он был удостоен 16 иностранных орденов, в том числе и таких экзотических наград, как Орден креста животворящего древа, полученный от иерусалимского патриарха в 1901 г. При этом у А. А. Бирилева был довольно большой командно-административный опыт: с 1897 г. он командовал отрядами и эскадрами, был старшим флагманом Балтийского флота, после отъезда Степана Осиповича Макарова в Порт-Артур принял пост главного командира Кронштадтского порта, фактически став высшим морским начальником на Балтике. По словам офицера царского флота и советского контр-адмирала, известного мемуариста В.А. Белли, «А.А. Бирилев, конечно, не был способен вывести флот и Морское министерство из того упадка, в который их привели в доцусимский период. Но в этот момент на горизонте еще не было фигуры, способной осуществить решительные реформы»[92]. Мемуарист отмечал как самодурство А.А. Бирилева, так и его определенный демократизм, – тот, уже будучи морским министром, запросто разговаривал с гардемаринами Морского корпуса и даже интересовался их мнением по вопросам обучения, к чему «мы никак приучены не были и реагировали … скорее положительно»[93].
Пост главного начальника флота и морского ведомства, который с 1881 г. занимал великий князь Алексей Александрович, не был упразднен до его смерти, но само назначение морского министра свидетельствовало о косвенном признании недостатков системы великокняжеского управления флотом. В рескрипте царя на имя нового морского министра от 29 июня 1905 г. указывалось, что основной задачей флота является обеспечение морской обороны побережья Балтийского моря и улучшение подготовки личного состава путем введения баллотировки офицеров при производстве в чин, улучшения военно-морского образования, судостроения, и предоставления командующим флотами в Балтийском и Черном морях большей самостоятельности