一时之间，杨谅又想起了当初王頍的好，忍不住悲戚起来。
还是赵子开知道此时不是悲伤的时候，黄明远的追兵就在后面，而天色放晴，一旦黄明远大军堵到清源城外，他们就是瓮中之鳖。
“大王，此时不是悲伤的时候，我等要赶紧返回晋阳，诛杀豆卢毓这个逆贼，才有可能与朝廷周旋。”
这时候杨谅被众人所劝，也是心中稍安。
“对！对！对！咱们赶紧走，赶紧回晋阳。豆卢毓这个狗贼，孤要将他碎尸万段！”杨谅对豆卢毓的痛恨激起了他心中最后一丝的血勇，杨谅准备返回晋阳，讨伐豆卢毓，他要问问豆卢毓这个狗贼为什么要背叛自己。
······
其实并非是豆卢毓背叛了杨谅，而是豆卢毓根本就没有忠诚过杨谅。既无忠诚，何来背叛，他自始至终都是朝廷那边的人。
豆卢毓是隋朝名将豆卢勣的次子，他的妹妹嫁给杨谅，他作为大舅哥也是水涨船高，担任汉王府主簿。
豆卢毓少英果，有气节。他作为一个世家子，很清楚杨谅所处的尴尬位置，因此尽力避免家族被拖到杨谅的战车上。后来杨谅眼看大位无望，曾试探过豆卢毓造反的想法，但被豆卢毓苦谏拒绝。
此后虽然杨谅不再和豆卢毓谈论造反之事，但豆卢毓心知杨谅必反，因此写信给兄长，让兄长避免与杨谅联系，更不可卷入其谋反的事件中。
豆卢毓的兄长显州（即唐州，今河南省泌阳县、桐柏县一带）刺史豆卢贤派弟弟豆卢懿前来看望豆卢毓，豆卢懿见晋阳的形势如此紧张，离生乱之时不远，担心豆卢毓会被困在晋阳，不得不附逆，因此劝豆卢毓赶紧离开。
但豆卢毓却不愿如此一走了之。
豆卢毓私下对弟弟豆卢懿说道：“我一个人回归朝廷，自然可以免祸，但这只是为我自身考虑，不是为国家。我的身份在并州本就特殊，我不如暂且装作跟从杨谅，慢慢地再见机行事，打听情报，替朝廷平叛出力。”
豆卢毓深知豆卢家族若是不让杨广因为杨谅之事忌惮，只得立得平叛大功才可。因此豆卢毓自己上演了一出无间道。
果然，杨谅作乱之后，豆卢毓没有直接反对，反而凭借着舅兄的身份，打听了很多事情，也劝着杨谅疏远裴文安、王頍等心腹谋士。
杨谅起兵之后，其兄豆卢贤更是向杨广进言道：“我弟弟豆卢毓平素就有抱负有气节，一定不会跟着造反，但是迫于叛逆的凶威，不能自主。我请求从军，和豆卢毓一里一外，杨谅就无法图谋作乱了。”
杨广虽然没有同意豆卢贤的请求，但是让他跟豆卢毓联系，多多打探杨谅的情报。并下达了一封赦免并州从逆反正官员的诏书，令豆卢毓多多拉拢杨谅的部下，准备反正。
豆卢贤秘密派家人把杨广的诏书送到豆卢毓的住处，兄弟二人开始策划这出无间道来。
刚开始杨谅手握重兵，虽然与豆卢毓亲近，但是豆卢毓并无丝毫的兵权，因此豆卢毓虽然积极活动，也联络了不少的仁人志士，但并没有太大的效果。
但裴文安兵败蒲州之后，豆卢毓趁机在杨谅面前述说朝廷的强大，并积极的出谋划策，向杨谅表达忠心。
杨谅倒也比较相信这个舅兄，觉得“打虎亲兄弟”，渐渐的给了豆卢毓很大的权利，委以重任。当然杨谅忘了他现在打的就是兄弟。
赵子开南下之后，豆卢毓也怂恿杨谅亲征，在豆卢毓和王頍等人的劝说之下，杨谅南下，而豆卢毓则趁机留在了晋阳，开始了他的反正行动。