后来隋炀帝被弑，裴矩被宇文化及任命为河北道安抚使，为河北起义军窦建德俘获。窦建德兵败被杀，裴矩率余部降唐，任殿中侍御史、民部尚书。
降唐后，裴矩似乎摇身一变，从谄媚奸狡的佞臣变成了勇于诤谏的正义化身，向李二陛下提出不少好主意，满朝称颂。
司马光曾点评说：古人有言：君明臣直。裴矩佞于隋而忠于唐，非其性之有变也；君恶闻其过，则忠化为佞，君乐闻直言，则佞化为忠。是知君者表也，臣者景也，表动则景随矣。
封伦、裴矩，其奸足以亡隋，其知反以佐唐，何哉？
惟奸人多才能，与时而成败也。
……
房俊拈着茶杯，略作沉吟，这才疑惑问道：“袁道长将晚辈比作裴矩，是说晚辈与裴矩一般才华横溢，还是说晚辈亦如裴矩那样忠奸难辨？”
袁天罡奇道：“你这娃娃当真听不懂话么？老道是说你与裴矩一样脸厚心黑，极度无耻”
房俊：“……”
他发现这位“半仙儿”似乎习惯怼人，幼稚得可笑又可恨。
小爷吃你家大米了还是怎的，要被你骂作无耻？若不是你成天拿着一个“面相殊异，不似善类”这样的话语胁迫于我，我犯得着低声下气？
心中有些不爽，房俊起身告辞：“伤自尊了，告辞”
