分司西京，宗誨貶為海州别駕。
景德初年(1004)，重新升齊賢為兵部尚書、知青州。
皇上到澶淵，任命他兼任青、淄、濰三州安撫使。
景德二年，改任吏部尚書。
上疏說：“我在先朝時，常憂慮靈、夏兩鎮會被繼遷并吞，議事者認為我的憂慮太過分了，大略列舉往事以明本末。
當時大臣們都以為繼遷隻是懷戀祖輩舊地，别無他心，先帝任命他為銀州廉察，以滿足他的心願。
到陛下賜給他銀、夏二州土地，寵任為節度，從此奸威愈滋，逆志尤兇。
多次阻斷靈州糧路，又侵擾邊境城池，幾年之間，靈州終于被他吞沒。
當靈池、清遠軍即将陷沒時，我正接受經略的使命。
我認為對付繼遷需要一兩處強大蕃族與之為敵，這乃是用蠻夷對付蠻夷，古今之上策。
于是請求朝廷以六谷王名目封潘羅支，使他效力。
當時朝廷親信大臣意見，全然與我的計謀不同，從中阻撓。
到繼遷被潘羅支射殺後，邊患才算稍稍平息。
現在繼遷的兒子德明像以往那樣攻劫城池，析靅遊龍缽等人又都在他的軍中，他們志向也似乎不小。
我憂慮的是德明乘皇上到東方之際，去進攻六谷，則瓜、沙、甘、肅、于阗幾處漸漸被他控制。
如果潘羅支還在，則德明不足為慮；現在潘羅支已死，厮铎督恐怕不是他的對手。
希望委任大臣經制其事。
”
齊賢跟從真宗到東邊封禅回朝後，被授任為右仆射。
當時建築玉清昭應宮，齊賢說畫瑞符，有損自謙之理，又違背奉天之意，多次請求停止此項工程。
大中祥符三年(1010)，出京任判河陽，跟從真宗祭祀汾陰回朝，升為左仆射。
大中祥符五年，換任回朝，請求歸家養老，以司空銜退休。
入宮辭别時便坐，剛拜見就仆倒地上，真宗急忙阻止他，允許他的兩個兒子扶持着上殿，命令給他加上三個坐墊。
回到洛陽，得到裴度的午橋莊，莊中有很多池榭松竹，每天與親朋舊友喝酒吟詩，心情很曠達閑适。
大中祥符七年夏天，去世，終年七十二歲。
追贈司徒，賜谥号為“文定”。
齊賢容貌豐碩，議論慷慨，有大略，以忠君為己任，留心刑獄，被他救活的人很多。
喜歡提獎寒門隽士。
年輕時家裡貧困，父親去世無法埋葬，河南縣吏替他辦喪事，齊賢非常感激他，以兄禮奉事他，即使顯貴也不變。
仲兄昭度曾經教他經書，昭度去世後，齊賢上表請求追贈他光祿寺丞，又曾經投靠太子少師李肅家，李肅死後，替他辦理喪事，逢年過節祭祀他。
趙普曾經向太宗推薦齊賢，未被重用，趙普就在皇上面前述說上述事實，說：“陛下如果進用齊賢，那麼齊賢今後感恩，更會有過于此。
”太宗非常高興，于是重用他。
種放的受重用，是齊賢推薦的，齊賢四次任職兩府，九次任職八座，以三公銜退休，康甯福壽，當時很少有人可與比拟。
任宰相時，興起幾宗大案，又與寇準互相傾軋，人們有時因這件事看不起他。
齊賢的幾個兒子都有成就：宗信任内殿崇班；宗理任大理寺丞；宗諒任殿中丞；宗簡任門合門祗候；宗讷任太子中舍；宗禮最賢，雖然曆次登朝為官，但害怕羁束，所以常常住在鄉間。