Больше всего после отставки Сперанского беспокоила участь его многочисленных рукописей, оставленных в Санкт-Петербурге. Он попросил государя позаботиться об их сохранности — особенно о черновике уложения государственных законов. Именно эту работу уволенный государственный секретарь считал причиной изгнания из столицы. «Введение к уложению» являлось планом всеобщего государственного преобразования в России. «Это моя собственность, самая священная и, быть может, самая значительная», — писал Сперанский. Александр I создал комиссию для разбора бумаг.
Также император учредил Комитет охранения общей безопасности. Этот орган должен был проверить доносы на Сперанского и его сторонников. Возглавил его новый председатель Государственного совета граф Салтыков. Рассматривалось даже дело о сношениях опального с Францией. Что касается либеральной программы реформ, то Александр окончательно отказался от этого курса. Ему приглянулись идеи Карамзина. Как раз тогда историк преподнес государю «Записку о древней и новой России» — манифест консервативных идей.
Николай Карамзин — идейный оппонент Михаила Сперанского
Кроме всего прочего Сперанский был также товарищем министра юстиции. Эта должность после опалы просто растворилась в воздухе. Не появилось даже преемника. Новый товарищ министра юстиции был назначен только при Николае I. Александр решил выслать Сперанского из столицы, обойдясь без официального указа об увольнении. В 1839 году его брат распорядился указать в графском дипломе, что в 1812 — 1816 гг. тот «находился вне службы».
Сначала Сперанский попал в Нижний Новгород. За ним было установлено наблюдение, его переписку отправляли императору. При этом ссыльному оказывалась «всякая пристойность по его чину». Александр продолжал внимательно просматривать переписку бывшего госсекретаря даже после начала Отечественной войны. Только после прочтения государем письма отправлялись по назначению.
Нападение Наполеона на Россию должно было отвлечь двор от Сперанского, однако его противники, напротив, воспользовались ростом антифранцузских настроений, чтобы напомнить Александру о мнимых связях ссыльного с противником. Опального сановника обвиняли в измене. Особенно старался новый губернатор Москвы граф Ростопчин (Растопчин в «Войне и мире» Льва Толстого). Он писал государю, что народ готов убить изменника прямо на городской ярмарке.
Нижний Новгород XIX века на картине Верещагина
В конце концов император распорядился выслать Сперанского еще дальше — в Пермь. В новом месте ссылки он занимался в основном чтением книг. По большей части это были религиозные произведения, так как брались они из библиотеки Пермской духовной семинарии. Сперанский даже начал учить древнееврейский язык, чтобы читать оригинальный текст Ветхого завета. Местные чиновники побуждали пермских мальчишек гоняться за ссыльным по улицам, бросать в него комья грязи и кричать ему вслед: «Изменник!». А привезенные в город пленные французы отказывались брать у него милостыню. И только семинаристы продолжали почтительно относиться к Сперанскому.
Пермский период был самым тяжелым во всей ссылке. Сперанский нуждался в деньгах и терпел постоянные унижения. Наконец, он попросил у Александра разрешения прожить остаток жизни в своем имении Великополье Новгородской губернии. Император долго тянул с ответом и позволил бывшему государственному секретарю переехать 31 августа 1814 года. Дата была выбрана неслучайно. В этот день вышел манифест об окончании войны с Наполеоном. Прощаясь с Пермью, Сперанский сказал купцу Ивану Попову: «Очень жаль, что не могу увезти с собою в кармане вашу Каму».
Пермь в 1805 году. Пейзаж Андрея Мартынова
Два года в Великополье, проведенные вместе со своей дочерью Елизаветой, реформатор считал лучшим периодом жизни. Здесь, вдалеке от столицы, даже несмотря на полицейский надзор, он обрел покой и забвение окружающих. «Полезнейшим временем бытия моего я считаю время моего несчастия и два года, которые посвятил я тебе», — писал позже Елизавете Сперанский.
В сентябре 1816 года Александр вернул сановника на государственную службу. Посредником между ними выступил Алексей Аракчеев. Сначала Сперанский стал пензенским, а затем — сибирским губернатором. В 1825-м им был составлен проект Манифеста о вступлении на престол Николая І. Последним значительным делом Сперанского стало составление Полного собрания законов Российской империи. За работу над кодификацией действительный тайный советник был возведен в графское достоинство.