九月，灵太后幸嵩高。光上表谏曰：“伏闻明后当亲幸嵩高，往还累宿。銮游近旬，存省民物，诚足为善。虽渐农隙，所获栖亩，饥贫之家指为珠玉，遗秉滞?遂，莫不宝惜。步骑万余，来去经践，驾辇杂还，竞骛交驰，纵加禁护，犹有侵耗，士女老幼，微足伤心。秋末久旱，尘壤委深，风霾一起，红埃四塞。辕关峭险，山路危狭，圣驾清道，当务万安。乘履涧壑，蒙犯霜露，出入半旬，途越数百，飘曝弥日，仰亏和豫。七庙上灵，容或未许；亿兆下心，实用悚栗。且藏蛰节远，昆虫布列，蠉蠕之类，盈于川原，车马辗蹈，必有类杀。慈矜好生，应垂未测，诚恐悠悠之议，将谓为福兴罪。厮役困于负担，爪牙窘于赁乘，供顿候迎，公私扰费。厨兵幕士，衣履败穿，昼暄夜凄，罔所覆藉，监帅驱捶，泣呼相望。霜旱为灾，所在不稔，饥馑荐臻，方成俭敝。为民父母，所宜存恤，靖以抚之，犹惧离散，乃于收敛初辰，致此行举，自近及远，交兴怨嗟。伏愿远览虞舜，恭己无为；近遵《老》、《易》，不出户牖。罢劳形之游，息伤财之驾，动循典防，纳诸轨仪，委司责成，寄之耳目。人神幸甚，朝野抃悦。”灵太后不从。
正光元年冬，赐光几杖、衣服。二年春，肃宗亲释奠国学，光执经南面，百僚陪列。司徒、京兆王继频上表以位让光。夏四月，以光为司徒、侍中、国子祭酒，领著作如故。光表固辞历年，终不肯受。
八月，获秃鹙鸟于宫内，诏以示光。光表曰：“蒙示十四日所得大鸟，此即《诗》所谓‘有鹙在梁’，解云‘秃鹙也’，贪恶之鸟，野泽所育，不应入殿庭。昔魏氏黄初中，有鹈鹕集于灵芝池，文帝下诏以曹恭公远君子，近小人，博求贤俊，太尉华歆由此逊位而让管宁者也。臣闻野物入舍，古人以为不善，是以张臶恶任?，贾谊忌鵩。鹈鹕暂集而去，前王犹为至诫，况今亲入宫禁，为人所获，方被畜养，晏然不以为惧。准诸往义，信有殊矣。且饕餮之禽，必资鱼肉，菽麦稻粱，时或餐啄，一食之费，容过斤镒。今春夏阳旱，谷籴稍贵，穷窘之家，时有菜色。陛下为民父母，抚之如伤，岂可弃人养鸟，留意于丑形恶声哉？卫侯好鹤，曹伯爱雁，身死国灭，可为寒心。陛下学通《春秋》，亲览前事，何得口咏其言，行违其道！诚愿远师殷宗，近法魏祖，修德延贤，消灾集庆。放无用之物，委之川泽，取乐琴书，颐养神性。”肃宗览表大悦，即弃之池泽。
诏召光与安丰王延明议定服章。三年六月，诏光乘步挽至东西上阁。九月，进位太保，光又固辞。光年耆多务，疾病稍增，而自强不已，常在著作，疾笃不归。四年十月，肃宗亲临省疾，诏断宾客，中使相望，为止声乐，罢诸游眺。拜长子励为齐州刺史。十一月，疾甚，敕子侄等曰：“谛听吾言。闻曾子有云：人之将死，其言也善，启予手，启予足，而今而后，吾知免夫。吾荷先帝厚恩，位至于此，史功不成，殁有遗恨。汝等以吾之故，并得名位，勉之！勉之！以死报国。修短命也，夫复何言。速可送我还宅。”气力虽微，神明不乱。至第而薨，年七十三。肃宗闻而悲泣，中使相寻，诏给东园温明秘器、朝服一具、衣一袭、钱六十万、布一千匹、蜡四百斤，大鸿胪监护丧事。车驾亲临，抚尸恸哭。御辇还宫，流涕于路，为减常膳，言则追伤。每至光坐诵读之处，未尝不改容凄悼。五年正月，赠太傅，领尚书令、骠骑大将军、开府、冀州刺史，侍中如故。又敕加后部鼓吹、班剑，依太保、广阳王故事，谥文宣公。肃宗祖丧建春门外，望?需哀感，儒者荣之。
初，光太和中，依宫商角徵羽本音而为五韵诗，以赠李彪，彪为十二次诗以报光。光又为百三郡国诗以答之，国别为卷，为百三卷焉。
光宽和慈善，不逆于物，进退沉浮，自得而已。常慕胡广、黄琼之为人，故为气概者所不重。始领军于忠以光旧德，甚信重焉，每事筹决，光亦倾身事之。元叉于光亦深宗敬。及郭祚、裴植见杀，清河王怿遇祸，光随时俯仰，竟不匡救，于是天下讥之。自从贵达，罕所申荐。曾启其女婿彭城刘敬徽，云敬徽为荆州五陇戍主，女随夫行，常虑寇抄，南北分张，乞为徐州长史、兼别驾，暂集京师。肃宗许之。时人比之张禹。光初为黄门，则让宋弁；为中书监，让汝南王悦；为太常，让刘芳；为少傅，让元暐、穆绍、甄琛；为国子祭酒，让清河王怿、任城王澄；为车骑、仪同，让江阳王继，又让灵太后父胡国珍。皆顾望时情，议者以为矫饰。崇信佛法，礼拜读诵，老而逾甚，终日怡怡，未曾恚忿。曾于门下省昼坐读经，有鸽飞集膝前，遂入于怀，缘臂上肩，久之乃去。道俗赞咏诗颂者数十人。每为沙门朝贵请讲《维摩》、《十地经》，听者常数百人，即为二经义疏三十余卷。识者知其疏略，以贵重为后坐疑于讲次。凡所为诗赋铭赞诔颂表启数百篇，五十余卷，别有集。光十一子，励、勖、勔、劝、劼、勊、勍、劬、、、勉。
励，字彦德，器学才行最有父风。举秀才，中军彭城王参军、秘书郎中，以父光为著作，固辞不拜。历员外郎、骑侍郎、太尉记室、散骑侍郎，以继母忧去职。神龟中，除司空从事中郎。正光二年，拜中书侍郎。领军将军元义为明堂大将，以励为长史。与从兄鸿俱知名于世。四年十月，父光疾甚，诏拜征虏将军、齐州刺史。以父寝疾，衣不解带。及光薨，肃宗每加存慰。五年春，光葬于本乡，又诏遣主书张文伯宣吊焉。孝昌元年十二月，诏除太尉长史，仍为齐州大中正，袭父爵。建义初，遇害河阴，时年四十八。赠侍中、卫将军、仪同三司、青州刺史。
子挹，袭。武定末，太尉。属齐受禅，爵例降。
挹弟损，仪同开府主簿。
勖，武定末，征虏将军、安州刺史、朝阳伯。齐受禅，例降。
勔，字彦儒，亦有父风。司空记室、通直散骑侍郎、宁远将军、清河太守，带槃阳镇将。为逆贼崔景安所害。赠征虏将军、齐州刺史。
子权，太尉参军事。
劼，武定中，中书郎。
光弟敬友，本州治中。颇有受纳，御史案之，乃与守者俱逃。后除梁郡太守，会遭所生母忧，不拜。敬友精心佛道，昼夜诵经。免丧之后，遂菜食终世。恭宽接下，修身厉节。自景明已降，频岁不登，饥寒请丐者，皆取足而去。又置逆旅于肃然山南，大路之北，设食以供行者。延昌三年二月卒，年五十九。
子鸿，字彦鸾。少好读书，博综经史。太和二十年，拜彭城王国左常侍。景明三年，迁员外郎、兼尚书虞曹郎中。敕撰《起居注》。迁给事中，兼祠部郎，转尚书都兵郎中。诏太师、彭城王勰以下公卿朝士儒学才明者三十人，议定律令于尚书上省，鸿与光俱在其中，时论荣之。永平初，豫州城人白早生，杀刺史司马悦，据悬瓠叛。诏镇南将军邢峦讨之，以鸿为行台镇南长史。徙三公郎中，加轻车将军。迁员外散骑常侍，领郎中。