全部抓獲。
不久提升為樞密都承旨。
宰相耶律俨讨厭人望與自己意見相左，遷之為南京諸宮提轄制置。
這年年中，任為保靜軍節度使。
有兩個小吏兇狠殘暴，百姓畏之如虎。
人望假裝和他們交好，暗地裡派人揭露其行事，黥其面而發配之。
這一年各地饑荒缺糧，隻有人望所治區域糧米不缺，路上聽不到報警的桴鼓。
遙授彰義軍節度使。
遷中京度支使，剛到任時，府庫倉廪均空無一物；任職半年，就積累起粟十五萬斛，錢二十萬镪。
遷為左散騎常侍，累遷至樞密直學士。
不多久，拜參知政事，判南京三司使事。
當時在錢粟支出和收入上的舞弊行為，尤其以燕地最為嚴重。
人望用缣帛制作曆書，凡是府庫物品之支出和收入，都派人另外登記，稱為“臨庫”。
奸邪之輩，狡黠之吏無法翻雲覆雨，便到處揚言人望年老昏聩。
朝論失察，改任人望為南院宣徽使，以表示優待老人。
過了一年，天祚帝手書“宣馬宣徽”四字诏令他到京。
到京以後，皇帝說：“我以為你已衰老，是誤聽人言了。
”于是拜他為南院樞密使。
人人都不敢向人望徇私求職，人望用人也必取錄公議認為恰當的人。
如曹勇義、虞仲文曾為奸人所排擠，人望加以推薦，均成為名臣。
當時百姓所患害的驿遞、馬牛、旗鼓、鄉正、廳隸、倉司之類的徭役，他們往往至破産也不能供給役事。
人望讓百姓出錢，由官府募人服役，時人皆以為便利。
又過了好久，請求告老還鄉，以守司徒、兼侍中離職回故裡。
卒，谥曰文獻。
人望有操守，喜怒不形于色，不曾依附他人以求升進。
起先被任命為執政，家中人慶賀。
人望憂懼地說“：得之不值得喜，失之不值得憂。
與你相争的人地位太高，排擠起你來一定慘酷。
”其處世警惕小心如此。