飾非，谏官檢舉他，他就轉彎抹角給人加罪，起草聖旨不秘密進行，以此炫耀，明示天下，好像天子的權力在他手中掌握一樣。
世宗肯定了秦鳌的意見，讓孚敬自己陳述事實，同意他退休。
李時請頒發俸祿、仆役給他，世宗親自批示說不行。
又請求，才允許他乘官方車馬還鄉。
十二年(1533)正月，世宗又想起他來，派鴻胪寺官員送手令召他來。
四月他回到朝廷。
六月，彗星又出現在畢宿昴宿中間，他自請退休，這次世宗沒批準。
第二年又提升他為少師兼太子太師、華蓋殿大學士。
最初，潞州陳卿作亂，孚敬主張用兵彈壓，反賊最後敗滅。
大同又發生暴亂，又主張彈壓，推薦劉源清為總督，出兵很長時間沒有效果。
以後，暴亂被平定，代王請大臣安撫。
夏言于是極力诋毀用兵的錯誤，請按代王的意見辦，話語中很把孚敬批評了一番。
孚敬惱了，扣下代王的奏章不往上送。
世宗告誡他與夏言言歸于好，而派黃绾到大同，見機行事。
孚敬因為自己的建議不被采用，自稱身體有病請求退休，三次遞申請。
不久兒子死了，更堅決請求。
世宗回答說：“愛卿并無疾病，想迷惑我罷了。
”孚敬又遞上奏章，不認錯不說，還一一诋毀過去共同議論“大禮”的桂萼、獻夫、霍韬、黃绾等。
世宗把他嚴厲批評了一通，他才出來辦事。
世宗在文華殿後面建造九五齋、恭默齋作為齋戒時的住所，命左右大臣賦詩。
孚敬和李時各做了四首遞上。
過後，他幾次被召見于便殿，世宗從容地和他議論政事。
十四年(1535)春天他得了病，世宗派宦官賜他酒肉，可是跟李時談話時，很說了他的執拗，而且不愛惜人才，積怨成山。
後來又派宦官送他藥物，手寫便條說“：古時候有皇帝剪下胡須為大臣治療疾病的，我現在則把我所吃的藥送給你。
”孚敬幸好得到這溫和的谕旨，就一次次上書請求退休。
世宗派行人、禦醫護送他還鄉，官府按規定供給他俸祿、仆從。
第二年五月，世宗又派遣錦衣官送他手诏并問候疾病，催他還朝。
路上走到金華，病發作得厲害，于是又返回去了。
十八年(1539)二月去世。
世宗在承天，聽說這個消息，傷心不已。
孚敬剛強、明智，為人果敢，不避嫌怨。
得到世宗信任後，也時常能進直言。
世宗曾想因為張延齡的造反之罪殺他全家。
孚敬争辯說“：延齡這個人是個守财奴，能反得起來嗎？”世宗幾次詢問，他還是那樣回答。
等秋後該問斬時，孚敬上書說“：昭聖皇太後年紀大了，突然聽到延齡死的消息，萬一不吃不喝，有個三長兩短，怎麼告慰敬皇帝的在天之靈呢？”世宗有意用語氣很重的話喝斥他，而孚敬的意見仍不停地提。
所以昭聖皇太後在世的時候，延齡得以長期關押而不死。
其他如清理功臣親戚的莊田，前前後後罷免天下鎮守軍隊的宦官，幾乎無有剩餘，這些都是他出的力。
他做官自持特别廉潔，痛恨貪贓枉法的官吏，一時間以财物行賄的事沒有了。
但他生性狠毒，剛愎自用，打擊報複，不護善人。
本想用力消除大臣中的小幫派，而自己先做了小集團的首領。
“大禮”的建議，大案的制造，直到他死後仍招衆人的怨恨。
但是世宗始終寵用他，他受到的禮遇，朝廷大臣中最終無人可比，世宗常稱他為少師羅山而不叫他的名字。
他死後禮官請給他取谥号，世宗采用不顧危難、忘己事君的意思，特谥文忠，追贈他為太師。