有來招降的人，李芾把他殺掉來對人宣示。
十二月，州城圍困日益危急，劉孝忠被炮擊中，癱瘓不能起身，諸将哭泣請求說“：事情已危急了，我們為國而死是可以的，但百姓怎麼辦？”李芾罵說：“國家平時之所以厚祿善待你們，是為了今天要你們報國。
你們但死死守住，以後有說此話的我先殺了你們。
”年三十之夜，元兵登上城樓，剛打退，旋即元兵像螞蟻一樣附牆而登，衡州太守尹..及其家人自焚，李芾命令把酒灑在地上表示祭奠。
因而留下賓客佐僚一起飲酒，晚上傳令，還親自書寫“盡忠”字樣作為号召，飲酒一直到天亮，諸賓客佐僚出來，參議楊震投花園水池而死。
李芾坐在熊湘閣召來部下沈忠，贈金子給他說：“我力量已盡，職分當死，我的家人也不可以被俘侮辱，你全部把他們殺掉，然後殺死我。
”沈忠伏地叩頭，推辭不能這樣做，李芾堅決命令他去做，沈忠哭泣允諾，拿酒使李芾的家人全部喝醉，就全部用刀殺死。
李芾也引頸受刃。
沈忠縱火焚燒他們的居所，回家殺掉他的妻子兒女，又到火場，大聲恸哭，舉身投地，于是自殺。
幕僚茶陵顔應蕍、安仁陳億孫都死。
潭州百姓聽說這一消息，多舉家自盡，城無虛井，缢死于樹林的人累累相比。
吳繼明等人以城投降，陳毅沖破包圍，将要奔往閩地，中途戰死。
事情被朝廷聽見後，贈李芾端明殿大學士，谥号“忠節”。
李芾剛到潭州，遣送他的兒子裕孫出城，說“：保存你以祭祀。
”他的孫子輔叔當時也在溫州親侄女家迎娶，都得以不死。
南宋二王把他們都召入閩以他們為官。
李芾為人剛直忠介，不畏強暴權貴，臨事精細敏悟，奸猾之人不能夠欺騙他。
而且精力過人，從清晨治理公事到傍晚毫無倦色，晚上通常到半夜才休息，五更時分又起床處理公事。
望見他凜然不可犯，像神明一樣，但他喜好賢能禮遇士人，與他接觸感到溫暖，雖然是一小小優點也誠懇獎掖推薦。
平生居官清廉，等到被排斥，家裡沒有剩餘的資産。