Скоро после свадьбы и нам удалось выехать в Калугу; мои родители не рискнули выехать нас встречать, боясь вновь сглазить наш приезд, встретил нас один Семен, но все было заранее обдумано и устроено моими родителями. Квартира была маленькая, но почти вся на солнце, при ней была целая усадьба и большой сад; нанята была нам кухарка, готовившая отвратительно, но зато прекрасная женщина, скотолюбивая и необычайно честная; всю живность, присылаемую нам из деревни, она продолжала откармливать, ни за что не соглашалась резать, привязавшись к своим питомцам, и весной все это возвратилось обратно в Сергиевское, только в откормленном виде. Я жалованья никакого не получал, и средства наши заключались в 200 рублей, получаемых от Папа́ ежемесячно, и в разной деревенской провизии, коей Мама́ нас обильно снабжала. Приходилось очень стесняться, и после беззаботной московской жизни и широкой жизни наших родителей в Калуге, которые были у нас на памяти, мы должны были завести совершенно новый строй, к которому, сознаюсь, привыкать было трудно. Особенно было трудно и неприятно, когда посещали нас какие-нибудь старые знакомые, для которых то стеснение, в котором мы жили, представлялось странным и необычным; ввиду дороговизны извозчиков, хотя в те времена в конец уплачивалось копеек 20, не больше, но и то это было нам не по средствам, прислали нам из Сергиевского лошадь и старые городские сани еще дедушки Волконского, за кучера в простом армяке ездил Евмений; однажды я делал с ним визиты, и на улице сани развалились, передок отвалился, и Евмений очутился под санями, так что пришлось отказаться от своей лошади и вернуть ее в Сергиевское. Помню, как на Пасхе мы с Лизой пошли пешком к заутрене в Мироносицкую церковь, взяв с собой фонарь, чтобы возвращаться таким же образом домой в темноту; когда же после заутрени зажгли свой фонарь и двинулись в путь, извозчик Никита, поджидавший седока своего и некогда служивший у нас, а потом у Трубецких кучером, сжалился над нами и настоял довезти нас, ни за что не соглашаясь взять за это какую-нибудь плату. Несмотря на много хороших сторон нашей калужской жизни, самолюбие мое очень страдало, и я все более проникался уважением к Лизе, которая совершенно не обращала внимания на все эти мелочи и удивлялась моему отчаянию и моим угрызениям совести, что я не сумел создать ей лучших условий жизни.
Служба моя меня интересовала; губернатор откомандировал меня в канцелярию губернского по крестьянским делам Присутствия, где я под руководством секретаря Присутствия Николая Петровича Флерова изучал старые дела, составлял журналы для доклада Комиссии и писал проекты резолюций; вначале по неопытности я много ошибался, но потом добился такого успеха, что многие мои резолюции проходили без поправок. С Булыгиным у меня никаких почти сношений не было, и это меня вполне удовлетворяло, потому что я совершенно не умел себя поставить с ним на почтительную ногу, как к начальнику, вместе с равноправным отношением как между лицами одного и того же круга; прежняя военная жилка внушала мне слишком подчиненное отношение, а вместе с тем положение мелкого провинциального чиновника, над которым в доме моих родителей и деда в былые времена всегда трунили и пренебрегали, возмущало меня, и, борясь между этими двумя течениями, я никогда не мог найти настоящую точку поведения и избегал всякого общения служебного с ним; на всю жизнь эта ненормальность отношений к Булыгину у меня осталась, даже когда судьба нас столкнула — его как министра, а меня как губернатора, и я убежден, что и он сохранил обо мне недобрую память, еще усугубившуюся, когда он женился на Ольге Деляновой, вдовствующей после смерти Абрама Хвощинского. На все лето 1889 года он меня отпустил в деревню, задав работу, а именно подготовить издание Положения о земских начальниках, подобрав все те статьи закона, на которые были ссылки Положения; работа была чисто компилятивная, но пришлось все-таки раза два съездить в Калугу порыться в старых Собраниях узаконений.