，多次诘問嚴嵩。
趙文華謀求自解的計策，熟悉皇帝喜愛告讦，找到被李默考試選拔的人策問，李默在考試時說“：漢武、唐憲因為英明睿智成就盛業，但晚年因用錯人而衰敗。
”趙文華于是上奏李默诽謗皇上。
并且說“：殘寇不難殲滅，因為督撫無能，才緻敗績。
李默懷恨我彈劾他的同鄉張經，謀思對我進行報複。
我論曹邦輔，他就唆使給事中夏木式、孫..危害我。
至今已有半年，邊疆之事日非。
昨日推薦總督，又不用胡宗憲而用王诰。
東南的戰亂何時才能解決，陛下的日夜之憂何時才能排除啊。
”皇帝大怒，下令禮部及法司讨論這件事。
他們上奏說李默偏執自用，喪失大臣體統；所引用的漢、唐之事，是不适宜他說的。
皇帝責罰禮部尚書王用賓等袒護，并各被剝奪薪俸三個月，将李默下诏獄。
刑部尚書何鳌引用子罵父律要将李默絞死。
皇帝說：“法律沒有寫臣罵君，是說必然沒有這樣的事發生。
現在既然有了，應加等斬首。
”李默被囚锢于獄中，後竟病死在獄中。
當時是嘉靖三十五年(1556)二月。
李默文雅有才辯，以氣節自豪。
任武試同考官時，得陸炳為門生。
陸炳氣焰顯赫時，他對李默極力推崇。
李默從外吏驟然顯貴，有恃靠的本錢，不依附嚴嵩。
凡遇到拔免官吏的事，總是與嚴嵩争行與不行，氣壯得很。
但是李默性情褊淺，用愛憎來分高低，頗有些袒護同鄉及舊部，以恩威自歸，士大夫對他的輿論不太好。
李默獲罪以後，他的繼任者吳鵬、歐陽必進，将嚴嵩當作父親看待，謹慎地依順他，吏部的權力盡失。
隆慶年期間，恢複李默官職，并準予祭葬。
萬曆年中，賜李默谥号文愍。