1959年夏天，中共中央在江西庐山召开政治局扩大会议，后来又接着开八届八中全会。
分组讨论是按六个大区。中央领导同志也分到小组参加讨论，少奇是到中南小组。开始阶段的气氛很轻松。白天开会，晚上经常有舞会或演出。多数同志都是第一次来庐山，所以大家纷纷利用开会的间隙，游览观光。
到了7月14日，彭德怀同志给毛主席写了封信，对“大跃进以来的工作提出了自己的意见，有些话在当时看来是讲得比较尖锐的。一开始大家不知道彭总写信的事，因为是写给毛主席一个人的么！7月16日，毛主席把彭总的信加了个标题：”彭德怀同志的意见书“，在会议上印发。大家这才知道。
彭总的信发到少奇同志这里的时候，先是秘书吴振英、刘振德同志他们看到了。他们看了挺高兴，说彭老总的信写得好，代表了他们的想法，称赞彭总敢于提意见。刘秘书还跑来把他们议论的情况和我说了。
会议开始转入讨论彭总的信。在讨论会上，少奇同志没有对彭总的信直接发表意见。他提出“成绩讲够，缺点讲透”。这个意见得到大多数人的赞同。
7月23日早晨，会务组突然通知，上午召开全体大会，毛主席讲话。
原来会议没有这个安排，所以少奇头一天很晚才吃了安眠药入睡。我一听是主席召集的会议，赶紧把他叫醒。由于安眠药还在起作用，他迷迷糊糊的就走了。我让警卫员扶着他下山，进会场。
少奇开完会回来，我就感到气氛不对了。秘书吴振英同志是跟少奇同志一起去开去的。他一回来就紧张地说：“毛主席发火啦！主席在会上对彭老总的信进行了严厉的批评。我们议论了半天，竟然一点也没看出来。”我也没想到突然起这么大的变化，我得感觉，彭总的信中用了一个“小资产阶级狂热性”，这个话把毛主席惹恼了。
散会时，胡乔木同志跟少奇同志一起到了我们的住处。乔木同志当时是中央书记处候补书记，在会上负责起草文件。当时文件已经写出了初稿，叫《庐山会议诸问题的议定记录》，基本内容是纠正一些“左”的东西。乔木对我说，他也是昨晚吃了安眠药，早晨被叫起来开会，到现在还晕头转向，就跟着少奇同志来了。我说：“现在已经中午了，就在这里吃午饭吧！”
这样，就在我们住的地方的小餐厅里，少奇、乔木，还有我，我们二个人在一起吃中饭。吃饭的中间，我听他俩议论文件的事。乔木说，现在情况发生了这么大的变化，原来的那个文件还行不行？要不要继续搞下去？少奇说：文件你们还是接着写。
后来会议上就开始批判彭老总了，说他是右倾机会主义，反党小集团。因为黄克诚同志（当时担任中央书记处书记、解放军总参谋长）、张闻天同志（当时担任中央政治局候补委员、外交部常务副部长）、周小舟同志（当时担任中共湖南省委第一书记）支持彭总的意见，所以他们也在被批判之列，说他们是反党集团的成员。
张闻天等同志曾来找少奇同志，说：这些情况我们上山后都给毛主席谈过，毛主席还称赞我们谈得好，现在怎么又批我们呢？少奇不知说什么好，只说：“你们好好听一听大家的意见吧！”事实情况是，许多发言不是讨论他们发表的意见，而是算起历父旧账来了。
少奇同志一直惦记着原来的那个文件。他又去找乔木，他提议，把反右倾的文件只发到省一级，不要向下传达，同时搞一个继续纠正“左”的错误的文件，发到县以下单位。少奇要乔木在起草文件时向毛主席转达他的提议。但会上批判彭总的火药味已经越来越浓了，乔木没敢向毛主席转达少奇的提议。后来在1962年的七千人大会上，少奇同志在总结经验时说到：如果当时上面反右，下面仍反“左”，情况要好多了。毛主席听说这事后批评胡乔木同志：“党的副主席叫你写完，你就该写嘛，不写是不对的。”可事实上，如果真的继续写出一个纠“左”的文件，后果很难设想。
