肃宗初，侍中崔光表曰：“彝及李韶，朝列之中唯此二人出身官次本在臣右，器能干世，又并为多，近来参差，便成替后。计其阶途，虽应迁陟，然恐班秩犹未赐等。昔卫之公叔，引下同举；晋之士丐，推长伯游。古人所高，当时见许。敢缘斯义，乞降臣位一阶，授彼泛级，齐行圣庭，帖穆选叙。”诏加征西将军、冀州大中正。虽年向六十，加之风疾，而自强人事，孜孜无怠。公私法集，衣冠从事；延请道俗，修营斋讲；好善钦贤，爱奖人物。南北新旧，莫不多之。大起第宅，徽号华侈，颇侮其疏宗旧戚，不甚存纪，时有怨憾焉。荣宦之间，未能止足。屡表在秦州预有开援汉中之勋，希加赏报，积年不已，朝廷患之。
第二子仲瑀上封事，求铨别选格，排抑武人，不使预在清品。由是众口喧喧，谤讟盈路，立榜大巷，克期会集，屠害其家。彝殊无畏避之意，父子安然。神龟二年二月，羽林虎贲几将千人，相率至尚书省诟骂，求其长子尚书郎始均，不获，以瓦石击打公门。上下畏惧，莫敢讨抑。遂便持火，虏掠道中薪蒿，以杖石为兵器，直造其第，曳彝堂下，捶辱极意，唱呼嗷嗷，焚其屋宇。始均、仲瑀当时逾北垣而走。始均回救其父，拜伏群小，以请父命。羽林等就加殴击，生投之于烟火之中。及得尸骸，不复可识，唯以髻中小钗为验。仲瑀伤重走免。彝仅有余命，沙门寺与其比邻，舆致于寺。远近闻见，莫不惋骇。
彝临终，口占左右上启曰：“臣自奉国及孙六世，尸禄素餐，负恩唯靦，徒思竭智尽诚，终然靡效。臣第二息仲瑀所上之事，益治实多，既曰有益，宁容默尔。通呈有日，未简神听，岂图众忿，乃至于此。臣不能祸防未萌，虑绝殃兆，致令军众横嚣，攻焚臣宅。息始均、仲瑀等叩请流血，乞代臣死，始均即陷涂炭，仲瑀经宿方苏。臣年已六十，宿被荣遇，垂暮之秋，忽见此苦，顾瞻灾酷，古今无比。臣伤至重，残气假延，望景顾时，推漏就尽，顷刻待终，臣之命也，知复何言？若所上之书，少为益国，臣便是生以理全，死与义合，不负二帝于地下，臣无余恨矣！一归泉壤，长离紫庭，恋仰天颜，诚痛无已。不胜眷眷，力喘奉辞，伏愿二圣加御珍膳，覆露黔首，寿保南岳，德与日升。臣夙被刍豢，先后衔恩，欲报之期，昊天罔极，亡魂有知，不忘结草。”彝遂卒，时年五十九。官为收掩羽林凶强者八人斩之，不能穷诛群竖，即为大赦以安众心，有识者知国纪之将坠矣。丧还所焚宅，与始均东西分敛于小屋。仲瑀遂以创重避居荥阳，至五月，创得渐瘳，始奔父丧，诏赐布帛千匹。灵太后以其累朝大臣，特垂矜恻，数月犹追言泣下，谓诸侍臣曰：“吾为张彝饮食不御，乃至首发微有亏落。悲痛之苦，以至于此。” 初，彝曾祖幸，所招引河东民为州裁千余家，后相依合，至于罢入冀州，积三十年，析别有数万户。故高祖比校天下民户，最为大州。彝为黄门，每侍坐以为言，高祖谓之曰：“终当以卿为刺史，酬先世诚效。”彝追高祖往旨，累乞本州，朝议未许。彝亡后，灵太后云：“彝屡乞冀州，吾欲用之，有人违我此意。若从其请，或不至是，悔之无及。”乃赠使持节、卫将军、冀州刺史，谥文侯。
始均，字子衡，端洁好学，有文才。司徒行参军，迁著作佐郎。世宗以彝先朝勋旧，不幸疹废，特除始均长兼左民郎中，迁员外常侍，仍领郎。始均才干，有美于父，改陈寿《魏志》为编年之体，广益异闻，为三十卷。又著《冠带录》及诸赋数十篇，今并亡失。初，大乘贼起于冀瀛之间，遣都督元遥讨平之，多所杀戮，积尸数万。始均以郎中为行台，忿军士重以首级为功，乃令检集人首数千，一时焚爇，至于灰烬，用息侥幸，见者莫不伤心。及始均之死也，始末在于烟炭之间，有焦烂之痛，论者或亦推咎焉。赠乐陵太守，谥曰孝。
子暠，袭祖爵。武定中，开府主簿。齐受禅，爵例降。 暠弟晏之，武定中，仪同开府中兵参军。 仲瑀，司空祭酒、给事中。
子台，仪同开府参军事。
仲瑀弟珉，著作佐郎。
史臣曰：郭祚才干敏实，有世务之长，高祖经纶之始，独在勤劳之地，居官任事，动静称述。张彝风力謇謇，有王臣之气，衔命拥旄，风声犹在。并魏氏器能之臣乎？遭随有命，俱婴世祸，悲哉！始均才志未申，惜也。