和氏璧再现邯郸后，赵国又发生了一件大事，那就是换了相国。自乐毅被燕国猜忌、逃归赵国后，赵惠文王极尽宠信礼遇之能事，亲自交付相国大印，封其为望诸君，使得燕齐大为震动。
乐毅任赵国相国后，某日出城，见到一名老人涉水过沁河，因水寒冷，下河后走不动，不得不坐在河中。乐毅起了怜悯之心，命随从护送老人上岸，分一件衣服给他，但随从均无多余之衣，乐毅便脱下自己身上的裘衣送给老人。此事哄传一时，人人称赞乐毅爱民如子。
平原君赵胜得知后却极为反感，告诉赵惠文王道：“昔日乐毅出征在外，有燕国大臣告发他有谋反之心。燕昭王不但立即处死了告发者，还赐王后服饰给乐毅妻子，赐公子服饰给乐毅之子。乐毅因此致信给燕昭王，感激知遇之恩，表示将尽忠于燕，至死不渝。他虽被新燕王猜忌，逃来赵国，但新燕王已经悔悟，多次派使者请他回去燕国，又封他的儿子乐间为昌国君。乐毅宁可抛妻弃子，也不回去燕国，留在赵国肯定是别有所图。他是相国之尊，却脱下自己的裘衣送给路边老人，这是有意收揽民心，想要替燕国谋取赵国。”
又建议赵惠文王，以乐毅能为赵王分忧、体恤百姓饥寒为由嘉奖乐毅，再下令查找国中有饥寒之困的百姓，给以供养，这样就可将乐毅对百姓所施小恩德变为大恩德。赵惠文王采纳其建议，嘉奖田单，又下令收养有饥寒之困的百姓。赵国百姓都以为乐毅体恤下民，是赵惠文王教导所致。
乐毅智谋过人，知道赵惠文王对自己起了戒心，遂主动辞去相国一职，回去赵国封地，从此再不过问诸国国事。一代名将，再无作为，直至默默死去。赵惠文王于是以平原君赵胜为相国。