然而，爷爷仍不顾毛泽东对他的“提醒”。当天下午，在第一小组会上第一个发言，他仍坦陈对大跃进、公社化运动中存在的问题的看法。可是说着说着，爷爷发现人们的注意力已不在总结教训，而是开始围绕彭德怀的信大加讨伐。
会议已从纠“左”转向反右。
7月25日，鉴于当时的形势，爷爷在第四小组会上谈到对彭德怀的信的看法时说：“彭总的信起了好作用，但是彭总的看法是错误的。”前半句是爷爷真实的思想，后半句则是迫于当时的形势违心说的。
爷爷又说：“彭总在生活方面很注意节约，艰苦卓绝，没人比得上。彭总有一股拗脾气，今后应该注意改掉。彭总也是关心经济建设的，只要纠正错误认识，是可以把工作做得更好的。”
爷爷这一次的发言，可以说是语焉不详。因为不想说的话他要说，想说的话他不能多说。尽管他知道会上需要的是批判彭德怀的话，他还是说了几句肯定彭总的话，这不仅仅是因为他与彭德怀是30来年生死与共的战友，相知很深，更重要的是，他要宣扬彭德怀的优点，维护他应有的自信和自尊。
7月31日到8月1日，连续两天的中央政治局常委会是由毛泽东主持，刘少奇、周恩来、爷爷、林彪以及彭德怀、彭真、贺龙参加。会议每次开六七个小时，主要是揭发和批评彭德怀。平时怕风、怕光、怕水，躲在毛家湾1号的林彪，此时却像援兵一样于7月29日上山，成了‘批彭’的急先锋。他大骂彭德怀是野心家，青年时曾起名“彭得华”，就想得中国。他大喊：“在中国只有毛泽东是大英雄，谁也不要想当英雄!”
爷爷第一天没有发言。
第二天，他第一个发言。
由于他态度温和，言词没有火药味，所以还没等他讲完，毛泽东就将腿抬起，用手指搔了几下鞋面，说：“隔靴搔痒!”
显然，这是对爷爷的发言没有“击中要害”而不满。
见毛泽东这么一说，爷爷便停止了发言。直到散会，他没有再说一句话。他知道他无法改变毛泽东的决定，正如他不能改变自己做人的原则一样。会议后期，他基本保持缄默，用无言表达他满腹的不同意见。
8月16日，会议通过《为保卫党的总路线、反对右倾机会主义而斗争》的决议和《关于以彭德怀同志为首的反党集团的错误的决议》，把彭德怀等人打成“反党集团”。在表决投票时，爷爷弯曲着胳膊，手举到别人一半高的位置，似乎表明他是在极不情愿的情况下举的手，这动作没有逃过洞察秋毫的毛泽东的眼睛。
