Вслед за тем Адашева перевели в Юрьев Ливонский под начальство боярина князя Дмитрия Хилкова. Судя по летописи, Хилков якобы отказался исполнить приказ государя о назначении Алексея «нарятчиком» (что именно должен был «наряжать» окольничий, неясно). Адашев просил о служебном назначении многажды, а боярин каждый раз отказывал ему, может быть, в ожидании инструкций из Москвы.

Сильвестр, остававшийся в Москве после отъезда Адашева в Ливонию, предпринимал отчаянные попытки предотвратить его отставку. Но успеха не добился. Тогда он объявил царю, что намерен уйти на покой в монастырь. Иван не стал удерживать своего старого наставника и, благословив, отпустил в Кириллов монастырь.

Царь не стал мстить родне священника. Государев дьяк Анфим, сын Сильвестра, был переведен из Москвы в пограничную крепость Смоленск, где и продолжал служить по крайней мере четыре года.

Сам Сильвестр имел возможность увезти с собой в Кириллов свою библиотеку, а также имущество и казну. В неизвестное время он отправил в Соловецкий монастырь шестьдесят шесть своих книг и более двухсот рублей денег. Сумма по тем временам была очень большой. Такую же сумму царь пожертвовал в Кириллов на устройство своей кельи. Сильвестр прожил в монастыре немало лет, не подвергаясь гонениям.

Противники Сильвестра и Адашева старались убедить царя в том, что ему пора избавиться от опеки со стороны наставников и править самодержавно, по своей воле. Они старались пробудить самолюбие государя, говоря, что бывший правитель пользуется большей популярностью в народе и среди дворян, чем сам монарх. «А к тому любяще их (Сильвестра и Адашева) все твое воинство и народ, нежели тобя самого».

Наставники государя давно враждовали с Захарьиными и старались ограничить влияние царицы Анастасии при дворе. В начале августа 1560 г. Анастасия умерла, и ее братья постарались убедить всех, будто ее «счаровали» (околдовали) враги. Захарьины указывали на Адашева. Это свидетельство Курбского находит прямое и недвусмысленное подтверждение в письмах Грозного. «А и з женою, — писал Иван IV, — вы меня про что разлучили? Только бы вы у меня не отняли юницы моея, ино бы Кроновы жертвы не было».

Подозрение в колдовстве пало на приживалку Алексея Марию Магдалыню. Позднее она была казнена вместе с пятью сыновьями как «черовница и Алексеева согласница».

Адашев был думным человеком и правителем. Лишить его думного чина и вотчин можно было только с помощью боярского суда. Нет ничего невероятного в сообщении Курбского о том, что отставка Адашева обсуждалась в Боярской думе в присутствии митрополита и высшего духовенства. Митрополит Макарий просил допустить Адашева в столицу, с тем чтобы решить вопрос о его судьбе в присутствии обвиняемого. Но Макарию возражали архимандрит митрополичьего Чудова монастыря Левкий, старец Мисаил Сукин, монах Васьян Бесный. Опираясь на их поддержку, Захарьины и их приспешники настояли на заочном разбирательстве. Адашев просил царя дать ему правый суд. Но его послания были перехвачены Захарьиными.

Обвинительный акт с перечнем провинностей правителя, одобренный самодержцем, был оглашен в думе, что решило исход дела.

О последних днях Адашева нет достоверных данных. Одна из летописей сохранила глухое известие, будто в Юрьев прибыл специальный гонец с царским повелением убить бывшего правителя. Гонец действительно был прислан, но для того, чтобы узнать причину смерти Алексея.

Курбский утверждал, что в Юрьеве Адашев два месяца содержался «под стражею». Если так оно и было, то непонятно, почему у опального не отобрали в казну его огромное поместье? Более того, вдова Алексея Адашева оставалась владелицей мужнина поместья еще 12 лет. Факт беспрецедентный. Не подтверждает ли он, что жена Алексея действительно была родственницей царицы? Если бы не заступничество влиятельных лиц, вдове выделили бы в лучшем случае небольшое поместье на прожиток.

Адашев не выдержал свалившихся на его голову бед и «в недуг огненый впал». Он умер от нервной горячки. Его недруги в Москве тотчас стали распространять слухи о том, что он отравился. Встревоженный монарх прислал в Юрьев ближнего дворянина князя Андрея Телятевского. Посланец произвел дознание о причинах гибели Адашева и составил отчет. Этот документ хранился в царском архиве: «Обыск князя Ондрея Петровича Телятевского в Юрьеве Ливонском про Олексееву смерть Адашева». Царя тревожила людская молва, приписавшая ему смерть недавнего любимца.

Падение правителя непосредственно не повлекло за собой крупных политических потрясений. Думного чина лишился брат Алексея Адашева Данила. От службы был отставлен Игнатий Вешняков. Многочисленные соратники временщика, а равно и его ставленники, избежали преследований, но должны были заново присягнуть на верность государю и его детям.

Расставшись с наставниками, царь постарался искоренить самую память о них. Что считалось при Сильвестре хорошим тоном, подверглось теперь осмеянию. На смену унылому постничеству пришли роскошные пиры и потехи. Царь приглашал во дворец своих тайных недоброжелателей-бояр и принуждал их пить «чаши великие». В потешной компании царя заведен был такой порядок. Первую чашу, полную «зело пьяного пития», выпивал сам Иван, такие же чаши подносили остальным пирующим, пока все не упивались до неистовства и «обоумертвия». Если кто-нибудь из гостей упирался и отказывался осушить кубок, его корили тем, что он «недоброхотен» царю, что из него еще не вышли «дух и обычай» Сильвестра и Адашева.

Попойки во дворце коробили ревнителей благочестия. Царь признавал свое «неблагочиние», но утверждал, что происшедшие при дворе перемены отвечают высшим интересам государства. Играми и потехами, говаривал Иван, он хотел добиться популярности среди народа и дворян, «сходя к немощи их, точию дабы нас, своих государей, познали, а не вас (бояр) изменников!» Иван старался укрепить свой престиж любыми средствами. В этом ему немало помогло духовенство. Через полтора десятилетия после царской коронации послы константинопольского патриарха привезли в Москву решение Вселенского собора, подтвердившее право московита на царский титул. Глава Вселенской Православной Церкви освятил своим авторитетом власть православного московского царя. Затеянные по этому поводу пышные богослужения призваны были упрочить власть Грозного.

Готовясь к войне с Литвой, правительство послало в Крым посольство для заключения мира. Подобный шаг знаменовал окончательный отказ Москвы от «наследства» Адашева в сфере восточной политики. Настойчивые поиски мира с Крымом объяснялись неблагоприятным для России оборотом дел в Ливонии. Вслед за Литвой в Ливонскую войну вмешались крупнейшие прибалтийские государства — Дания и Швеция, принявшие участие в разделе ливонского наследства. В апреле 1560 г. герцог Магнус, брат датского короля, вступил во владение островом Эзель. Спустя месяц Ревель и Северная Эстония перешли под власть Швеции.

Задавшись целью предотвратить создание широкой антирусской коалиции в Прибалтике, московское правительство заключило союзный договор с Данией, предоставило 20-летнее перемирие шведам и обратило все свои силы против Литвы. Русское командование решило нанести удар по Полоцку, ключевой пограничной крепости, закрывавшей пути на литовскую столицу Вильну. В наступлении на Полоцк участвовали почти все вооруженные силы страны: 18 105 дворян (их сопровождали до 20 000–30 000 вооруженных холопов), 7219 стрельцов и казаков, более 6000 служилых татар. Общая численность ополчения составляла 31 546 человек, а вместе с вооруженными холопами — около 50 000–60 000 человек.