但是，可以肯定的是，自从这次谈话后，包括韩爱晶在内的红卫兵领袖开始逐渐被冷落了。毛泽东的谈话通过一些渠道也在北航传开了，与“红旗”对立的一派趁机抓住这一点，攻击“红旗”派首领韩爱晶反对毛主席、反对解放军。有人甚至提出要把韩爱晶当作反革命揪出来。原来紧跟韩爱晶“红旗”派的一些人也作鸟兽散，有的还反戈一击。韩爱晶的日子开始不好过了。在反对派一片“打倒”、“揪出”的鼓噪声中，他不再多露面了。
被揪了出来
当时，打死打伤工宣队员的蒯大富最受人注目，因此，在此时也最招风。这样反而使韩爱晶减轻了来自各方面的压力。盯住他的，只有北航那些同他对立的人、一些吃过他的苦头的人。另一方面，“中央文革”对红卫兵五大领袖还是力保的，在方方面面替他们说好话。这就使惹了大祸的他，在短时间内毫发未伤。
但事情是变化的。就在红卫兵五大领袖以为躲过一劫之时，在武汉发生了“七二○事件”。这个事件是在“中央文革”成员的鼓动下搞起来的，他们想借“文革”之机“揪军内一小撮”，这引发了极大矛盾，在武汉也发生了大的动荡。这个事件引起军队干部的极大不满，毛泽东也十分震怒。他在上海否定了由“中央文革”成员起草的八一社论，提出：还我长城!毛泽东的话传到北京，“中央文革”的人慌了。他们赶紧“丢卒保车”，把王力、关锋、戚本禹先后抛了出来。这些人一倒，红卫兵五大领袖自然逃不掉，于是，红卫兵五大领袖开始被注意了。他们所在单位的造反派率先起来向他们进一步发难。这些向他们发难的造反组织又串连全国的造反组织一同发难，一时间，红卫兵五大领袖成了“小爬虫”的代名词。他们所在的单位都把他们揪了出来，不光进行批斗，还把他们关押起来。他们被勒令交待问题。好在有“中央文革”暗中保护，他们还算没有吃多大的苦头。
韩爱晶也被揪了出来。他多次被找去谈话，要求讲清问题。此后，韩爱晶被隔离审查，后被监督劳动。
被判刑入狱
1976年，“四人帮”被粉碎。随后，中央宣布“文革”结束。在党的十一届三中全会前后，中央展开了平反冤假错案的工作，一些在“文革”中受到冲击的受害者纷纷提出要追究那些制造这些冤案的人的责任。红卫兵五大领袖又重新进入人们的视野。但这次他们是作为反面人物进入人们视野的。
