到明憲宗統治後期，明憲宗漸漸昏聵，在加上內閣和六部都是平庸之輩, 劉吉憑藉巴結皇帝、勾結宦官的本事，排擠打壓那些彈劾他的人，不僅能相安無事，還官越做越大，大家也對此無可奈何。當時除了他意外，還有劉翊和[[萬安]]兩位內閣成員也是每天混日子的，所以時人稱其三人為“紙糊三閣老”，六部尚書則是“泥塑六尚書”. 。  而劉吉，則是三閣老中最昏庸的一位，同為閣老的劉珝曾罵劉吉“負國無恥”，但劉吉無恥歸無恥，能力卻是超一流，沒幾個月，劉珝便被劉吉搞下台！<ref>{{Cite Web|url=https://new.qq.com/omn/20181201/20181201A0GK2X.html|title=绰号刘棉花，无数人弹劾，仍稳居内阁18年，最终被皇帝逼下台|website=騰訊網|accessdate=2020-01-01}}</ref>