刘少奇根据大家意见与看法，认为还是“四清”和“四不清”的矛盾，既在党内，也在党外，既有敌我矛盾，又有人民内部矛盾，并且是相互交叉着。
而刘少奇这些“四清”和“四不清”的矛盾分析，毛泽东之前就根本不同意，并把它们视为原则分歧、两条路线的斗争。毛泽东在“四清”运动中没有得到主导权，全国“四清”运动基本是按照刘少奇的路子进行的，在毛泽东看来，他似乎被架空了。中央工作会议开幕前，邓小平对毛泽东说：“这会不重要，您老人家不用参加了。”本意是想说，这样的会议应该是主持一线工作的刘少奇的事情。
说者无意，听者有心，毛泽东很介意。邓的话反而激起了他的逆反情绪，他坚持要参加。到此为止或可作罢，偏偏刘少奇又加了一句：“参加可以，但不要发言了。”
一个不让参加，一个让参加却不让说话。毛泽东是一个自尊心极强的人，新中国成立以后，他从未受到过这样的对待，心理上无法接受。
毛泽东反问：“我为什么不参加？为什么不能说话？”
刘少奇和邓小平看毛泽东真的生气了，没有再行阻止。
1964年12月15日第一天的中央工作会议毛泽东是参加了，但两位主席话分两头，各说各的，这让很多不知情的大区和省部级领导们一时思路跟不上趟，满腹疑惑，不得其解。
