В феврале 1962 года бюро Свердловского райкома партии Москвы исключило Молотова из рядов КПСС за антипартийную фракционную деятельность, активное участие в массовых репрессиях. Молотов направил письмо в МГК КПСС с просьбой оставить его в партии. На заседании бюро горкома тогдашний первый секретарь МГК П. Н. Демичев задал ему вопрос: «Мы спрашиваем вас как человека: почему вы, подписывая списки, безвинных людей направляли на расстрел?» Молотов ответил: «Я считаю это ошибкой» [37] .
Бывший советский премьер был отправлен на пенсию. Что касается городов и поселков, носящих имя Молотова, то им были возвращены прежние названия еще в 1957 году. В стране не осталось больше ни одного предприятия или учреждения «имени Молотова».
Вскоре после XXII съезда, как вспоминает А. И. Аджубей, Полина Семеновна Жемчужина добилась приема у Хрущева! «В ответ на ее просьбу восстановить мужа в партии Никита Сергеевич показал ей документ с резолюцией Молотова о расстреле жен Косиора, Постышева и других ответственных работников Украины, затем спросил, можно ли, по ее мнению, говорить о восстановлении Молотова в партии или надо привлекать к суду» [38] .
В 1961 году Молотов вернулся в Москву. После исключения из партии он лишился многих пока остававшихся у него привилегий. Однако часть из них была сохранена для жены Молотова. Вместе с ней и немногочисленной семьей Молотов жил или в своей квартире на улице Грановского или на даче в Жуковке, дачном поселке для привилегированных лиц. Мало кто навещал его кроме родственников.
Однажды его посетила дочь Сталина Светлана Аллилуева. В книге «Только один год» Аллилуева писала:
«Я видела постаревшего, поблекшего Молотова — пенсионера в его небольшой квартире уже после того, как Хрущева сменил Косыгин. Молотов, по обыкновению, говорил мало, а только поддакивал. Раньше я всегда видела его поддакивающим отцу. Теперь он поддакивал жене. Она была полна энергии и боевого духа. Ее не исключили из партии, и она теперь ходила на партийные собрания на кондитерской фабрике, как в дни молодости. Они сидели за столом всей семьей, и Полина говорила мне: „Твой отец был гений. Он уничтожил в нашей стране пятую колонну, и, когда началась война, партия и народ были едины. Теперь больше нет революционного духа, везде оппортунизм. Посмотри, что делают итальянские коммунисты! Стыд! Всех запугали войной. Одна лишь надежда на Китай. Только там уцелел дух революции!“ Молотов поддакивал и кивал головой. Их дочь и зять молчали, опустив глаза в тарелки. Это было другое поколение, и им было стыдно. Родители походили на ископаемых динозавров, окаменевших и сохранившихся в ледниках» [39] .
Эта беседа происходила в разгар «культурной революции» в Китае.
В 1963–1967 годах они часто выходили погулять по арбатским переулкам, при этом оживленно беседуя, нежно прижавшись друг к другу. Через несколько лет П. С. Жемчужина умерла. Организацию похорон взяла на себя та фабрика, в которой Жемчужина состояла на партийном учете. На этих похоронах были также представители райкома партии. На траурном митинге выступил и Молотов. Это было его первое и последнее публичное выступление после ухода на пенсию. Он говорил о том пути, который прошла покойная, и одновременно о той большой работе, которую проделали партия и советское государство в 30—40-е годы. Но Молотов конечно же умолчал об аресте и ссылке своей жены и о преступлениях прошлых лет.
Еще в середине 60-х годов Молотов начал писать мемуары. Он работал над ними не только дома, но регулярно приходил в профессорский зал Государственной библиотеки имени Ленина. Конечно, Академия наук уже давно исключила Сталина и Молотова из списка «почетных» академиков. Но за Молотовым было сохранено право посещать зал для профессоров и академиков. Этот же зал обычно посещают и иностранцы, которым приходится работать в Москве над своими дипломами или книгами. В 1968 году рядом с Молотовым занималась одна французская студентка. Заметив, что молодая женщина слишком часто и с любопытством смотрит на него, он, проходя мимо, положил на ее стол клочок бумаги, на котором было написано: «Молотов — правая рука Сталина в прежние времена».
Закончив первую часть своих мемуаров — о временах революции 1905 и 1917 годов, — Молотов позвонил писателю Борису Полевому, который был главным редактором журнала «Юность». Именно в этом журнале в 1967 году была опубликована первая часть мемуаров А. И. Микояна, также о временах революции. Но Борис Полевой явно не торопился принять предложение Молотова. Он попросил позвонить еще через несколько дней. Когда Молотов позвонил Полевому во второй раз, тот сухо ответил, что «Юность» не будет печатать его мемуаров и что он советует передать их в Институт марксизма-ленинизма. Неизвестно, последовал ли Молотов этому совету. Однако все, кто знал его, убеждены, что в своих мемуарах он не стал бы ни в чем раскаиваться и ничего пересматривать, а только искал бы любые доводы для оправдания своего прошлого.
В своей квартире Молотов жил с дочерью Светланой, историком по профессии. Ему не полагалось никакой охраны, и он мог свободно ходить и ездить по Москве и стране, куда ему заблагорассудится. Кроме библиотеки он часто посещал различные выставки и концерты. Но особенно часто Молотов ходил в театры. У него были и любимые постановки. Так, например, в Театре имени Вахтангова он несколько раз смотрел пьесу Корнейчука «Фронт», в которой по ходу действия боец говорил: «Я написал письмо Молотову».
В Театре на Таганке Молотов несколько раз побывал на пьесе «Десять дней, которые потрясли мир». В одной из сцен после 1964 года долгое время сохранялся замаскированный, но понятный тогда всем критический выпад против Хрущева, которого в конце 1964 года Пленум ЦК отправил на пенсию. Очень часто Молотов посещал небольшой кинотеатр в Жуковке, построенный для обитателей привилегированных дач. Там показывали фильмы западного производства, которые не выходили на массовый экран. Среди публики было немало «отставников», хорошо знавших Молотова, но относившихся к нему с видимым равнодушием.
Молотов почти не встречался ни с кем из общественных деятелей или журналистов. Но иногда он делал исключения. Так, например, он несколько раз виделся с писателем Юлианом Семеновым, которого познакомил с Молотовым в Кремлевской больнице хорошо известный советским людям старшего поколения писатель Лев Шейнин, автор весьма популярной в свое время книги «Записки следователя». Однако мало кто знал тогда, что Шейнин был не только следователем по уголовным делам, но и ближайшим помощником Вышинского по многим политическим делам. Именно Шейнин был одной из ведущих фигур при подготовке политических процессов 1935–1936 годов. Молотову это, конечно, было известно, и рекомендация Шейнина служила для него показателем «благонадежности». О своих встречах с Молотовым Юлиан Семенов рассказал впоследствии на страницах журнала «Нева»: