第五伦后来到朝廷做代理司空的官。他看到肃宗皇帝对太后的亲属都委以重任，觉得很不合于法度，将来必会给国家带来灾难，就上书皇帝，直言不讳地批评圣上。他处处奉公守节，说话办事毫无顾虑，家人和孩子常劝他别太任性，以免得罪权贵自讨苦吃，可他却训斥儿子不忠不贞。
第五伦的铁面无私，在朝廷内外一时传为美谈，人们很敬仰他。一天，一位同僚赞扬他说：“像你这样的人真可以说是毫无私情了！”
第五伦却认真地反驳说：“你说的不全面呀！以前曾有一位熟人送给我一匹马，想叫我帮他谋个官做。马我当然没收下，可是当我举荐别人做官时，常常想起他。这不是证明我还是有私情吗？再比如说，我的侄儿生病，一宿我起来十回去看他，但回到床上我很快就睡着了，睡得很安稳。我自己的儿子生病就不一样了，虽然夜里我不去瞧他，但我整夜睡不着觉，担心孩子的病情。你看我哪里够得上是毫无私情呢？”
成语“一夜十起”就是由此而来，后人用它形容待人体贴周到。
·因棋失“兰亭”·
典出民间故事。
《兰亭集序》是东晋大书法家王羲之的得意之作，王家视为珍宝，代代相传。到了唐代，太宗李世民能写一手好字，最喜爱王羲之的书法。他从民间搜罗了很多王羲之的字帖，可就是找不到真本《兰亭集序》，平常与人提起便感到十分遗憾。后来听说真本为永欣寺的大和尚辨才所藏，就把辨才邀请到宫中，询问此事，辨才矢口否认，说这是“谣传”，太宗也无可奈何。监察御史萧翼为人狡猾多谋，为了博得皇帝的欢心，便自告奋勇，愿去寻找。