Желая выяснить линию дальнейшего поведения А. Н. Хвостова в отношении себя, я, узнав, что А. Н. Хвостов, не говоря мне, восстановил свои старые сношения с кн. Андрониковым, и тот у него бывает в последнее время почти ежедневно, сговорился с кн. Андрониковым о времени, когда я могу застать его одного дома, отправился к нему. Здесь я выслушал от князя ряд упреков за изменившееся отношение мое к нему, вопреки постоянно оказываемому им вниманию ко мне; при этом кн. Андроников припомнил мне и обед с митрополитом, на который я его не пригласил, и мое стремление отдалить его от Распутина и А. А. Вырубовой, о чем ему передавал А. Н. Хвостов. Далее кн. Андроников указал мне, что и я и А. Н. Хвостов — оба младенцы в отношении знания сложных форм придворных взаимоотношений и что А. Н. Хвостов раньше меня это сознал, и он, кн. Андроников, теперь ему помогает выпутаться из того тупика, в какой он попал с Ржевским.
Весь этот разговор меня взволновал, и я, прося кн. Андроникова держать в секрете, рассказал ему про замыслы А. Н. Хвостова устранить Распутина, причем, будучи уверен, что он передаст А. Н. Хвостову наш разговор, сообщил кн. Андроникову, не выдавая Комиссарова, про добытый Комиссаровым яд и про опыт действия яда и, наконец, не скрывая, объяснил, что я противодействовал все время А. Н. Хвостову и сдерживал Комиссарова, так как на такое дело, как убийство, я не могу пойти. Затем я рассказал князю историю с Ржевским и просил его, для моей личной ориентировки, сказать мне, что замыслил в отношении меня А. Н. Хвостов, указав князю, что я все время о замыслах А. Н. Хвостова относительно Распутина никому не говорил и держусь пока выжидательной тактики в своем поведении к А. Н. Хвостову. Тогда кн. Андроников, одобрив мое отношение к А. Н. Хвостову и горячо советуя мне следовать сему и в дальнейшем, под особым секретом передал, взяв с меня слово, что я не скажу об этом Хвостову, что он, кн. Андроников, накануне доклада А. Н. Хвостова государю был у А. Н. Хвостова, долго с ним советовался, и результатом этого явился сегодняшний доклад А. Н. Хвостова государю о назначении меня в Иркутск генерал-губернатором. При этом кн. Андроников начал мне расписывать всю заманчивость моего нового положения и, намекнув на то, что в этом отношении он мне оказал большую услугу, добавил, что он питает уверенность в моем содействии, которое я ему должен буду оказать в будущем в Иркутске, куда он приедет с иностранными капиталистами для учреждения акционерного общества по эксплоатации местных залежей золота, причем, указывая на мою материальную обстановку и необходимость для меня обеспечить будущее семьи, ясно дал понять, что он сделает меня негласным пайщиком в этом деле. Это для меня было неожиданностью, так как А. Н. Хвостов, будучи в последнее время недоволен кн. Волконским за его якобы явно обнаруживаемые желания, при посредстве придворных и великокняжеских связей, занять пост министра внутренних дел, и совещаясь со мной, останавливался на мысли назначить кн. Волконского в Иркутск на эту должность и тем отдалить его от Петрограда, но колебался принять окончательное в этом отношении решение, опасаясь отказа кн. Волконского и явного перехода его после этого в лагерь противников его, А. Н. Хвостова. Затем, когда я указал кн. Андроникову на то, что назначение меня в Иркутск ставит меня в стеснительное материальное положение, так как это одно из старых генерал-губернаторств, где оклад содержания генерал-губернатора менее всех других генерал-губернаторских управлений, не говоря о приамурском генерал-губернаторстве, а между тем, судя по тому, что мне передавал Князев, в Иркутске генерал-губернатору приходится нести тяготу не только местного, но и международного представительства, вызывающую большие, непосильные для меня расходы, то кн. Андроников на это мне ответил, что А. Н. Хвостов путем дополнительных денежных ассигнований из сумм министерства сравняет меня во всех отношениях с приамурским генерал-губернатором и обещал по этому поводу переговорить с А. Н. Хвостовым. В заключение кн. Андроников еще раз подчеркнул необходимость для меня в данную минуту подчиниться этому решению и ничем не осложнять А. Н. Хвостову его затруднительное в настоящее время из-за дела Ржевского положение.
Хотя это назначение выбивало меня из колеи сложившейся в Петрограде жизни, где дети мои воспитывались в учебных заведениях и где я уже сжился, но, когда я переговорил по этому поводу с женою и увидел ее особую радость и удовольствие тому, что я, таким образом, отхожу от всего того, что ей доставляло постоянные душевные мучения, то я сам понял, что в моем выезде из Петрограда заключается мое спасение от той тины, которая меня окончательно может засосать в грязь и довести до опозорения моей чести. В виду этого, когда А. Н. Хвостов, повидимому, поставленный кн. Андрониковым в известность о моем с ним разговоре, на другой день передал мне, о состоявшемся повелении государя о новом моем назначении и сказал, что он, зная о моей материальной обстановке и о предстоящем мне на первых порах, пока я не устрою перевода детей в учебные заведения г. Иркутска, жизни на два дома, позаботится об исходатайствовании мне дополнительного денежного ассигнования и поручил мне составить ему в этом направлении всеподданнейший доклад, переговорив с вице-директором департамента общих дел Е. Г. Шинкевичем, — то я только спросил его, А. Н. Хвостова — «за что?». На это он ответил, что все еще поправимо, если я ликвидирую Распутина.
Выслушав мой ответ, что теперь, с моим уходом, у него развязаны руки в отношении Распутина, я перевел разговор на необходимость ему, А. Н. Хвостову, теперь же позаботиться о Комиссарове, так как Комиссаров, когда я ему передал о своем назначении в Иркутск, мне категорически заявил, что он без меня ни в какие дальнейшие комбинации А. Н. Хвостова входить не желает и просил меня до отъезда озаботиться об его служебном приличном устройстве. Указав А. Н. Хвостову, что присутствие Комиссарова в Петрограде, в виду обстановки отхода его от Распутина, едва ли, при возникшей в настоящее время у Вырубовой и Распутина ко всем нам подозрительности, отвечает интересам его, Хвостова, всецело направленным к погашению нежелательных разговоров в связи с делом Ржевского, я посоветовал ему устроить Комиссарова куда-нибудь в провинцию или военным губернатором, или губернатором в неземскую губернию, или градоначальником, так как Комиссаров оставаться далее в корпусе жандармов не желает. Из ответа А. Н. Хвостова я узнал, что Вырубова, в виду настояния Распутина, тоже потребовала удаления Комиссарова из Петрограда, вследствие чего он хотел было устроить его, как предполагалось нами ранее, в Москву начальником жандармского управления, то теперь, в виду моего заявления, он приложит все свои старания исполнить желание Комиссарова.
При таком положении дела мне стало ясно, что А. Н. Хвостов меня и Комиссарова сделал ответственными за все события последнего времени, связанные с делом Ржевского. Поэтому я указал на это А. Н. Хвостову, откровенно его предупредив, как и кн. Андроникова, что я со всем этим примиряюсь до той поры, пока он сам будет корректен в отношении меня, ничем не заденет моего самолюбия, в особенности тем или другим образом связывая меня с делом Ржевского. Действительно, я, по опубликовании указа, занялся приведением в порядок для сдачи в департамент полиции всех имевшихся у меня на руках переписок, и хотя до меня доходили сведения о том, что и А. А. Вырубова и Распутин продолжают интересоваться историей Ржевского, но меня это уже не волновало, и я был поглощен вместе с женою заботами об устройстве на новом месте, сборами, покупками, экипировкой, наймом прислуги и обменом писем с Князевым, служебными визитами министрам и знакомым и даже принял участие в облегчении прибывшему из Иркутска городскому голове скорейшего разрешения вопроса о Ленской дороге в желаемом для города Иркутска направлении, предполагая пред своим отъездом поехать с визитом к Вырубовой и Распутину. Но, затем, через Комиссарова, почти ежедневно бывавшего по поводу своего назначения у А. Н. Хвостова, и от В. В. Граве, заходившего ко мне вечером в мое служебное помещение на Морской, и от других лиц ко мне начали доходить сведения о том, что А. Н. Хвостов в разговоре с могилевским губернатором Пильцом, которого он, боясь усилившегося внимания к нему государя, пригласил на должность товарища министра внутренних дел, но не поручил ему наблюдения за департаментом полиции, с членами государственного совета и Думы и в обществе, выставляет причиною перемены его отношения ко мне то, что я, несмотря на его безграничное доверие и внимание ко мне, интригуя против него, А. Н. Хвостова, хотел было, пользуясь своею близостью к Распутину и Вырубовой, занять его должность и для этой цели поездке Ржевского, командированного им заграницу для покупки у Илиодора писем императрицы, придать в глазах Вырубовой и Распутина значение устройства заговора при посредстве Илиодора на жизнь Распутина, в чем он А. Н. Хвостов изобличил меня государю, но, опасаясь, чтобы я не злоупотребил своею осведомленностью о многих интимного характера делах, касающихся двора, он признал за лучшее меня удалить из Петрограда и, не желая озлобить меня, с видимым, служебным повышением. Затем из достоверного источника я узнал, что когда проникли в прессу сведения о деле Ржевского, которым Гурлянд по поручению А. Н. Хвостова, старался придать тот желательный А. Н. Хвостову оттенок, то А. Н. Хвостов, в разговоре с представителями совета редакторов — М. А. Сувориным и И. В. Гессеном, бросил мне тот же упрек, всячески пытаясь отмежеваться от своей близости к Распутину и Вырубовой. Наконец, когда, по рекомендации Яблонского, А. Н. Хвостов вызвал ген. Климовича и предложил ему должность директора департамента полиции, согласившись на поставленные ему Климовичем условия как относительно самостоятельного на правах товарища министра управления департаментом, так на освобождение его от выступления в Государственной Думе и в заседаниях ее комиссий, на изменение взаимоотношений департамента и корпуса и на увеличение ему оклада содержания до 30 тыс. руб., то А. Н. Хвостов дал от себя заметку в газеты о том, что он после моего ухода признал нужным внести коренные изменения в систему управления департамента полиции и взял на себя непосредственное и личное руководительство и, главным образом, наблюдение за всеми делами департамента. После этого А. Н. Хвостов сделал даже несколько приемов доклада как и. д. директора, так и политического вице-директора.