改，與客相對飲酒談笑，慢慢寫了幾頁信交付給他的仆人說：“我如果死了，按照信中所說去做。
”回頭對客人說“：死不難了。
”客人秘密從仆人那裡看到信中所寫都是安排同貶當死的人的家事，很周到。
判官沒有走到二十裡，嘔血而死，危險得以幸免。
昭懷皇後正位中宮，章..、蔡卞告發以前劉安世勸谏奶媽之事，認為是針對皇後而言。
當時鄒浩已被貶斥，诏命應天府少尹孫..用檻車捉收劉安世、鄒浩二人前往京城。
走了幾個驿站的路而徽宗即皇帝位赦令來到，孫..于是返回。
劉安世被流放到荒遠的地方共七年，甲令所記載的邊遠污穢之地沒有沒經曆過。
移居衡州及鼎州，然後以集賢殿修撰的身份知郓州、真定府，曾布又忌恨他，不讓他入朝。
蔡京既為宰相，把劉安世連續七次貶谪到峽州拘系管制。
稍複承議郎，寄居宋州州城。
宣和六年(1124)，恢複待制職務，中書舍人沈思封還此命。
第二年劉安世去世，終年七十八歲。
劉安世儀表魁梧高大，說話聲如洪鐘。
開始被任命為谏官，沒有受君命，進屋禀告母親說：“朝廷不因為安世不賢，讓我在言路。
倘若居其官職，必須明目張膽，以身任責，倘或有所觸犯忤逆，禍患譴責立即到來。
皇帝正以孝治理天下，如果以老母親辭謝，應可以免任此職。
”母親說：“不行，我聽說谏官是天子的诤臣，你父親一生想做谏官而沒有如願，你幸運居此地位，應獻身以報效國家的恩典。
即使獲罪被流放，不論遠近，我當跟從你居住。
”劉安世于是接受任命。
他在職多年，正色立朝，扶持公道。
他當面在朝廷争辯，有時皇帝大怒，就手執書簡站立，等候皇帝怒氣稍稍消解，再重複前面的正直之辭。
在旁的侍從遠遠觀看，退縮恐懼冒汗，稱他為“殿上虎”，一時無不敬畏。
家居從來沒有懈怠的樣子，長久坐立身不傾斜，寫字不寫草書，不喜好聲色财利。
他忠孝正直，立身行事均效法司馬光。
年紀老了，衆賢死亡略盡，巋然獨存，而名望更高。
梁師成用事當權，他有生殺予奪之權勢，内心折服劉安世的賢能，找到曾經在劉安世身邊供過事的小吏吳默，派他持信來，以馬上重用引誘，吳默因而勸劉安世為子孫打算，劉安世笑着感謝說：“我如果替子孫打算，不至于這樣了。
我想做元..十全十美的人，在黃泉下去見司馬光。
”歸還梁師成的信沒有答複。
死後葬在祥符縣。
二年後，金人挖開他的墳墓，相貌如生，互相驚異告訴說“：這是異人。
”替他蓋上棺材才離開。