12 декабря 1741 г. низложенный император вместе со всей семьей был отправлен из Петербурга в Ригу в обмен на обязательство родителей отречься за него от всяких прав на российский престол. Императрица Елизавета Петровна обещала отпустить их на этом условии за границу. В Риге арестанты пробыли до 13 декабря 1742 г., после чего их заключили в крепости Динамюнде (ныне Даугавпилс в Латвии). За это время у Елизаветы окончательно созрело решение не выпускать из пределов России Ивана VI и его родителей как опасных претендентов на престол, так как Анна Леопольдовна так и не согласилась отречься за сына от всяких прав на престол. С 1744 г. опальную семью отправили в Холмогоры. Там она жила в полной изоляции от внешнего мира. В 1746 г. Анна Леопольдовна умерла. Ее с почестями похоронили в Александро-Невской лавре в Петербурге. В 1762 г. Антону Ульриху предложили выехать за границу, но он отказался оставить своих четверых детей и умер в России 4 мая 1774 г.
Что же касается Ивана Антоновича, то после отрыва от родителей вся его жизнь прошла в одиночном заключении в Шлиссельбургской крепости. Согласно инструкции, узника ничему не учили, в случае неповиновения разрешалось сажать его на цепь и бить. В Шлиссельбурге сам комендант крепости не должен был знать, кто содержится в ней под именем «безымянного колодника». Видеть его могли и знали его имя только три офицера стерегшей его команды; им запрещено было говорить царственному узнику, где он находится; в крепость без указа Тайной канцелярии нельзя было впустить даже фельдмаршала. Однако, по рассказам очевидцев, «Иван Антонович знал свое происхождение и называл себя государем. Вопреки строгому запрещению обучать его, он от кого-то научился грамоте, и тогда ему разрешили читать Библию. У него была хорошая память», так как он мог на память воспроизвести любое место из Четьих миней. По другим же сведениям, он так и не научился читать. Это был юноша среднего роста, довольно слабого сложения, но здоровый, насколько может быть здоров человек, всю жизнь проведший в заточении, лишенный воздуха, движений.
С воцарением Петра III положение Ивана VI не улучшилось, а скорее изменилось к худшему, хотя и были толки о намерении Петра освободить узника. Во всяком случае, по его указу повелевалось: «Буде, сверх нашего чаяния, кто б отважился арестанта у нас отнять, в таком случае противиться сколь можно и арестанта живого в руки не давать». По слухам, при воцарении Екатерины II вице-канцлер А. П. Бестужев-Рюмин составил план ее брака с Иваном. Екатерина виделась с ним в тюрьме и сочла его сумасшедшим.
Как ни старались власти, тайну пребывания Ивана VI в Шлиссельбурге сохранить не удалось. Служивший в гарнизоне крепости подпоручик Смоленского пехотного полка В. Я. Мирович решил восстановить справедливость и возвести царственного узника на трон. В ночь с 4 на 5 июля 1764 г. он попытался освободить Ивана VI, но надзиратели капитан Я. Власьев и поручик Л. Чекин выполнили предписание Петра III, убив его шпагой сзади. Тело бывшего императора похоронено в Шлиссельбургской крепости по христианскому обряду, но тайно.
Елизавета Петровна являлась младшей из выживших детей Петра I и Екатерины I. Родилась в селе Коломенском под Москвой. Петр любил ее и звал Лизеткой. Он даже назвал так парусник, на котором плавал в Балтийском море. Систематического образования Елизавета не получила. Оно ограничилось обучением танцам (по свидетельству современников, она танцевала лучше всех в Петербурге), светскому обращению, французскому и немецкому языкам. Их знала она в совершенстве. Но о пробелах в образовании свидетельствует то, что, уже будучи императрицей, очень удивилась, когда узнала что Великобритания — остров. В юности она мало интересовалась политикой.
Объявленная в 1722 г. совершеннолетней, цесаревна стала центром различных дипломатических проектов. Отец хотел выдать ее замуж за короля Франции Людовика XV либо за иного принца дома Бурбонов; когда же эти планы не удались, цесаревну начали сватать за второстепенных немецких принцев, пока не остановились на принце Карле-Августе Голштинском, епископе Любеком, который успел ей очень понравиться. Однако смерть жениха расстроила и этот брак.
