张浚自蜀还朝，荐孝祥，召赴行在。孝祥既素为汤思退所知，及受浚荐，思退不悦。孝祥入对，乃陈"二相当同心戮力，以副陛下恢复之志。且靖康以来惟和战两言，遗无穷祸，要先立自治之策以应之。"复言："用才之路太狭，乞博采度外之士以备缓急之用。"上嘉之。
除中书舍人，寻除直学士院兼都督府参赞军事。俄兼领建康留守，以言者改除敷文阁待制，留守如旧。会金再犯边，孝祥陈金之势不过欲要盟。宣谕使劾孝祥落职，罢。
复集英殿修撰、知静江府、广南西路经略安抚使，治有声绩，复以言者罢。俄起知潭州，为政简易，时以威济之，湖南遂以无事。复待制，徙知荆南、荆湖北路安抚使。筑寸金堤，自是荆州无水患，置万盈仓以储诸漕之运。
请祠，以疾卒，孝宗惜之，有用才不尽之叹。进显谟阁直学士致仕，年三十八。
孝祥俊逸，文章过人，尤工翰墨，尝亲书奏札，高宗见之，曰："必将名世。"但渡江初，大议惟和战，张浚主复仇，汤思退祖秦桧之说力主和，孝祥出入二人之门而两持其说，议者惜之。
论曰：尤袤学本程颐，所谓老成典刑者，立朝抗论，与人主争是非，不允不已，而能令终完节，难矣。谢谔、颜师鲁、袁枢临民则以治辨闻，立朝则启沃忠谏，各举乃职，为世师表。李椿、刘仪凤言论节概，著于行事。张孝祥早负才畯，莅政扬声，迨其两持和战，君子每叹息焉。