Работа над воспоминаниями стала основным делом Н.С. Хрущева в период его пребывания на пенсии. В ответ на предложение Сергея Хрущева, чтобы отец обратился в ЦК за помощью, тот ответил: «Не хочу их ни о чем просить. Если сами предложат – не откажусь. Но они не предложат – мои воспоминания им не нужны. Только помешать могут». Поскольку в своих рассказах о прошлом Хрущев исходил из безошибочности своих действий, а во всех бедах страны винил других руководителей СССР, и прежде всего Сталина, то он неизбежно вступал в конфликт с новой интерпретацией истории, в которой о деятельности Хрущева и других руководителей предпочитали вообще ничего не говорить. Поэтому Хрущев решил не только не просить помощи у властей, но стал скрывать от них свою работу над мемуарами. Запись производилась на дачном участке, так как Хрущев опасался подслушивания внутри дома. По этой причине слова Хрущева порой заглушались ревом пролетавших мимо самолетов.

По словам С.Н. Хрущева, «надиктовывая километры магнитофонной ленты, отец все больше мучился – какая же судьба ждет его воспоминания? "Напрасно все это. Пустой труд. Все пропадет. Умру я, все заберут и уничтожат или так похоронят, что и следов не останется", – не раз повторял он во время наших воскресных прогулок». Забота сохранить пленки с воспоминаниями была понятна и объяснима, но менее объяснимо стало стремление Хрущева и его сына переправить пленки за границу.

Сергей Хрущев так объяснил это решение: «В одной из бесед на прогулке нам пришла идея поискать сохранное место за границей. Отец сначала сомневался, опасаясь, что там рукопись выйдет из-под нашего контроля, может быть искажена и использована во вред нашему государству. С другой стороны, сохранность там обеспечивалась надежнее. После долгих взвешиваний «за» и «против» отец все-таки попросил меня обдумать и такой вариант. Естественно, это решение мы хранили в строжайшей тайне». Как и любимый его литературный герой Пиня, Хрущев, видимо, сначала и не думал о том, чтобы выступить против воли властей, но, будучи по характеру импульсивным и мятежным, он постепенно встал на путь, который вел его к нарушению советских порядков. Даже если исходить из того, что переправка его воспоминаний за рубеж диктовалась лишь желанием сберечь их для истории, было очевидно, что Хрущев был готов сделать то, что он раньше никогда не позволил бы ни одному гражданину СССР. Он, обвинивший поэта Бориса Пастернака в измене Родине за издание своего аполитичного романа за границей, теперь был готов переправить за рубеж свою рукопись, раскрывавшую немало неизвестных страниц из государственной жизни страны и содержавшую оценки, противоречившие официальным.

Видимо, ни подготовка Хрущевым воспоминаний, ни его планы переправить их за границу не прошли мимо внимания спецслужб. По словам В.В. Гришина, Ю.В. Андропов, который в 1967 году сменил В.Е. Семичастного на посту руководителя КГБ СССР, «сказал, что Н.С. Хрущев надиктовывает свои воспоминания и высказал беспокойство по этому поводу». В апреле 1968 года, когда советское руководство впервые стало выражать тревогу «пражской весной», Хрущева вызвали в ЦК КПСС.

Хрущева принимал член Политбюро (так с 1966 года стал именоваться Президиум ЦК КПСС) и секретарь ЦК КПСС А.П. Кириленко. Вместе с ним были член Политбюро и председатель Комиссии партийного контроля А.Я.Пельше, а также секретарь ЦК КПСС П.Н. Демичев. Пересказывая отца, Сергей Хрущев так описал эту встречу: «Кириленко сразу перешел к делу, без обычных в таких случаях вопросов о самочувствии. Он заявил, что Центральному Комитету стало известно, что отец уже в течение длительного времени пишет свои мемуары, в которых рассказывает о различных событиях истории нашей партии и государства. По сути дела, он переписывает историю партии. А вопросы освещения истории партии, истории нашего Советского государства – это дело Центрального Комитета, а не отдельных лиц, тем более пенсионеров. Поэтому Политбюро ЦК требует, чтобы он прекратил свою работу над мемуарами, а то, что уже надиктовано, немедленно сдал бы в ЦК…»

То, что произошло затем, свидетельствовало о том, что и в 74 года Хрущев сохранил способность к ярким демагогическим речам и умение доводить любую ситуацию до скандала. С.Н. Хрущев писал: «Отец помолчал, потом оглядел своих бывших соратников. В ответ он начал говорить спокойно, все больше и больше распаляясь. Он сказал, что не может понять, чего хотят от него Кириленко и те, кто его уполномочил. В мире, в том числе и в нашей стране, мемуары пишет огромное число людей. Это нормально. Мемуары являются не историей, а взглядом каждого человека на прожитую им жизнь. Они дополняют историю и могут служить хорошим материалом для будущих историков нашей страны и нашей партии. А коли так, он считает их требование насилием над личностью советского человека, противоречащим Конституции, и отказывается подчиниться». «Вы можете силой запрятать меня в тюрьму или силой отобрать эти материалы. Все это вы сегодня можете со мной сделать, но я категорически протестую», – добавил он. «Никита Сергеевич, то, что я вам передал, – решение Политбюро ЦК, и вы обязаны как коммунист ему подчиниться. В противном случае…» – настаивал Кириленко.

«Отец не дал ему договорить. "То, что позволяете себе вы в отношении меня, не позволяло себе правительство даже в царские времена. Я помню только один подобный случай. Вы хотите поступить со мной так, как царь Николай I поступил с Тарасом Шевченко, сослав его в солдаты, запретив там писать и рисовать. Вы можете у меня отобрать все – пенсию, дачу, квартиру. Все это в ваших силах; и я не удивлюсь, если вы это сделаете. Ничего, я себе пропитание найду. Пойду слесарить, я еще помню, как это делается. А нет, так с котомкой пойду по людям. Мне люди подадут". Он взглянул на Кириленко. "А вам никто и крошки не даст. С голоду подохнете"».

«Понимая, что Хрущев с Кириленко говорить не будет, в разговор вмешался Пельше, сказав, что решение Политбюро обязательно для всех, и для отца в том числе. Этими мемуарами могут воспользоваться враждебные силы». А ответ Хрущев заявил: «Вот Политбюро и выделило бы мне стенографистку и машинистку, которые записывали бы то, что я диктую. Это нормальная работа. Они могли бы делать два экземпляра – один оставался бы в ЦК, а с другим бы я работал, – более спокойно сказал отец. Но, вспомнив о чем-то, с раздражением добавил: "А то, опять же в нарушение Конституции, утыкали всю дачу подслушивающими устройствами. Сортир и тот не забыли…"»

По словам Сергея Хрущева, «свидание это выбило отца из колеи… Диктовку отец забросил, возобновляя работу лишь эпизодически. В 1968 году он продиктовал очень мало. Так что в этом смысле Кириленко добился желаемого результата». Однако вскоре отец и сын вновь стали обсуждать вопрос о переправке воспоминаний за границу. С.Н. Хрущев писал: «Тогда же впервые возникла мысль, что в случае чрезвычайных обстоятельств или изъятия материалов в качестве ответной меры их нужно будет опубликовать. Публикация окончательно решала проблему их сохранности и, естественно, сильно снизила бы стремление отобрать и уничтожить материалы. Что спрашивается, искать, если книгу можно запросто купить в магазине? Ведь весь тираж не скупишь… Мне удалось нащупать пути передачи копии материалов за рубеж». Сергей Хрущев понимал, что «решившись на этот шаг, мы фактически переходили от легальной деятельности к «нелегальной». Мне было немного не по себе. Неизвестно, чем это могло кончиться: арестом, ссылкой? Думать о последствиях не хотелось, надо было действовать».

В своих воспоминаниях Сергей Хрущев не раскрыл всю цепочку лиц, которые помогли ему переправить воспоминания его отца за границу, сославшись на то, что «многие из тех, кто принимал участие в этом деле, живы». Он лишь упомянул, что «материалы – пленки и распечатки – пересекли несколько границ и нашли надежное пристанище за стальными дверцами сейфа». Вскоре Н.С. Хрущев дал окончательное согласие издать воспоминания за рубежом. Он сказал: «Все может случиться. Не исключено, что не только ты, но никто не сможет добраться до сейфа. Хорошо бы договориться условно с каким-нибудь солидным издательством, что они опубликуют книгу, но не к конкретному сроку, а после того, как мы отсюда дадим знак».