齐贤又请调江淮、荆湘丁壮八万以益防御，朝议以为动摇，兼泽国人民，远戍西鄙亦非便，计遂寝。
齐贤又言："灵州斗绝一隅，当城镇完全、碛路未梗之时，中外已言合弃，自继迁为患已来，危困弥甚。南去镇戎约五百余里，东去环州仅六七日程，如此畏途，不须攻夺，则城中之民何由而出，城中之兵何由而归？欲全军民，理须应接。为今之计，若能增益精兵，以合西边屯驻、对替之兵，从以原、渭、镇戎之师，率山西熟户从东界而入，严约师期，两路交进。设若继迁分兵以应敌，我则乘势而易攻。且奔命途道，首尾难卫，千里趋利，不败则禽。臣谓兵锋未交，而灵州之围自解。然后取灵州军民，而置砦于萧关、武延川险要处以侨寓之，如此则蕃汉士人之心有所依赖。裁候平宁，却归旧贯，然后纵蕃汉之兵，乘时以为进退，则成功不难矣。"时不能用。未几，灵武果陷。
闰十二月，拜右仆射、判汾州，不行，改判永兴军兼马步军部署。时薛居正子惟吉妻柴氏无子早寡，尽畜其货产及书籍论告，欲改适齐贤。惟吉子安上诉其事，上不欲置于理，命司门员外郎张正伦就讯，柴氏所对与安上状异。下其事于御史，乃齐贤子太子中舍宗诲教柴氏为词。齐贤坐责太常卿、分司西京，宗诲贬海州别驾。
景德初，起为兵部尚书、知青州。上幸澶渊，命兼青、淄、濰州安抚使。二年，改吏部尚书。上疏言曰："臣在先朝，常忧灵、夏两镇终为继迁并吞，言事者以臣所虑为太过，略举既往之事以明本末。当时臣下皆以继迁只是怀恋父祖旧地，别无他心，先帝与以银州廉察，庶满其意。尔后攻劫不已，直至降麟、府州界八部族蕃酋，又胁制贺兰山下帐族，言事者犹谓封奖未厚。洎陛下赐以银、夏土壤，宠以节旄，自此奸威愈滋，逆志尤暴。屡断灵州粮路，复挠缘边城池，数年之间，灵州终为吞噬。当灵池、清远军垂欲陷没，臣方受经略之命。臣思继迁须是得一两处强大蕃族与之为敌，此乃以蛮夷攻蛮夷，古今之上策也。遂请以六谷名目封潘罗支，俾其展效。其时近臣所见，全与臣谋不同，多为沮挠。及继迁为潘罗支射杀，边患谓可少息。今其子德明依前攻劫，析逋游龙钵等尽在部下，其志又似不小。臣虑德明乘大驾东幸之际，去攻六谷，则瓜、沙、甘、肃、于阗诸处渐为控制矣。向使潘罗支尚在，则德明未足为虞；今潘罗支已亡，厮铎督恐非其敌。望委大臣经制其事。"
从东封还，复拜右仆射。时建玉清昭应宫，齐贤言绘画符瑞，有损谦德，又违奉天之意，屡请罢其役。
三年，出判河阳，从祀汾阴还，进左仆射。五年，代还，请老，以司空致仕。入辞便坐，方拜而仆，上遽止之，许二子扶掖升殿，命益坐茵为三。
归洛，得裴度午桥庄，有池榭松竹之盛，日与亲旧觞咏其间，意甚旷适。七年夏，薨，年七十二。赠司徒，谥文定。
齐贤姿仪丰硕，议论慷慨，有大略，以致君自负。留心刑狱，多所全活。喜提奖寒隽。少时家贫，父死无以为葬，河南县吏为办其事，齐贤深德之，事以兄礼，虽贵不替也。仲兄昭度尝授齐贤经，及卒，表赠光禄寺丞。又尝依太子少师李肃家，肃死，为营葬事，岁时祭之。赵普尝荐齐贤于太宗，未用，普即具前列事，以谓："陛下若进齐贤，则齐贤他日感恩，更过于此。"上大悦，遂大用。种放之起，齐贤所荐也。齐贤四践两府，九居八座，以三公就第，康宁福寿，时罕其比。居相日，数起大狱，又与寇准相倾，人或以此少之。
齐贤诸子皆能有立：宗信，内殿崇班；宗理，大理寺丞；宗谅，殿中丞；宗简，阁门祗候；宗讷，太子中舍；宗礼最贤，虽累资登朝，而畏羁束，故多居田里。
宗诲字习之，齐贤第二子也。少喜学兵法，阴阳、象纬之书无不通究。以父任为秘书省正字，迁至太子中舍，贬海州别驾。尝通判河阳，徙知富顺监。会夷人斗郎春叛，群獠皆骚动，宗诲将郡兵攻破之。擢开封府判官、三司度支勾院。宗诲在开封日，御史王沿劾其嗜酒废事，及为河北转运使，乃发沿居丧假官舟贾贩，朝论恶之。
会以调发扰民，徙知徐州。累迁太常少卿，后为永兴军兵马钤辖，又徙鄜延路兼知鄜州。元昊寇延安，刘平、石元孙败没，钤辖黄德和遁还，延州不纳，又走鄜州。宗诲曰："军奔将无所归，激之则为乱矣。"乃纳之，拘德和以闻。是时鄜城不完，且无备，传言寇兵至，人心不安。宗诲乃严斥候，籍入而禁出，使老幼并力守御之，敌亦自引去。领兴州防御使，复徙永兴钤辖兼知邠州，以秘书监致仕。