两个没有想到
胡耀邦虽然迫切希望“要有建树，就要敢闯”，但他担任中共总书记之后，也犯了他在团中央时候的大忌：抓的面太宽，经常发急。在当时中国进行改革开放的大背景下，利益纷争和政治局面都很复杂，胡耀邦最终于1987年1月16日辞职。
在胡耀邦辞职后，王仲方1989年3月19日第二次见到了胡耀邦。当时胡耀邦刚从一次肺炎中康复过来。
胡耀邦在谈话中说自己有“两个没有想到”。一个是1980年，没有想到自己走上了中共党主席(后来是总书记)的职位。当时他就表示，虽然担任了中共的最高职位，但是胡耀邦还是胡耀邦，并没有因为职位高了，本事就大了。第二个是1987年初下台以后，没想到威信和影响反而更大了。
胡耀邦表示，要重视这“两个没有想到”，度好晚年，不过问工作，到下面不要省的领导汇报工作，谈谈也就很好了。
胡耀邦太天真了
王仲方对耀邦说：“你当总书记时，也不是没有缺点和失误，党内外对你也不是没有意见。但是，让你下台的方式很不正常，反而使党内外，以至国外，对你的同情和支持更高了。我认为1987年你下台，最大的损失不是你胡耀邦本人，而是损害了十一届三中全会以后，树立起来的党的形象。党并不如领导人再三表示的，在文革之后，党的生活，特别是领导层的政治生活已经正常了，倒是使党内外沉重地看到，党内政治生活不正常的阴影似乎又重现了。”
胡耀邦在十一届三中全会之后心境一度很振奋的，多次谈到毛泽东提出的“既有集中又有民主、又有纪律又有自由、又有统一意志又有个人心情舒畅、生动活泼的政治局面”终于可以实现了。但正如曾任中共上海市委常委、《光明日报》总编辑的杨西光所说，胡耀邦太天真了。
此后不到一个月，胡耀邦4月15日在北京病逝，葬于江西共青城，全国民众悼念。