第五伦生性节俭虽有二千石的俸禄却仅留够己用，多余的低价卖给贫苦百姓

第五伦请求辞官，汉章帝给予终身二千石俸禄的优待

第五伦晚年时接连以身老体病上疏请求辞职。
元和三年（86年），章帝允许请辞职，终身给予二干石官员的俸禄，加赐钱五十万，公宅一所。第五伦于数年后去世，享年八十余岁，朝廷下诏赐给安葬的秘器、衣衾和钱布。

对于第五伦的评价：为百姓谋福利，得民心

《东观汉记》：①第五伦为乡啬夫，平徭役，理怨滞，得民之欢心。②第五伦性节俭，作会稽郡，虽为二千石，卧布被，自养马，妻炊爨，受俸禄常求赤米，与小吏受等，财留一月俸，馀皆贱粜与民饥羸者。③第五伦为司空，奉公不挠，言议果决，无所依违，诸子谏止，辄叱之。
范晔：伯鱼、子阿，矫急去苛。临官以洁，匡帝以奢。
钱时：《泰九二》曰：“包荒用冯河，不遐遗。”此大臣所以广进人才之路也。然有一毫朋比之私，即非中矣。是故，必朋亡而后得尚于中行，岂可以赂遗之故而遂不忘于心乎。心不能忘者，心已动于赂故也。虽不受，犹受也。虽不用，犹用也。其原弗窒，其流滔滔，此殖已崇私之病根也。虽然，却其马而不受，绝其人而不用，而独以心不能忘为私，则第五伦亦贤矣。