后来由于薛无常等人的干涉不可避免的落了下风，最后与皇位失之交臂，只得回到自己的封地吹西北风。
薛无常在痛失爱女之初确实动了怂恿藩王造反的念头，越王也很上道，给薛无常送了不少金银珠宝以表诚意，只是造反毕竟不是那么好玩的，大部分都是以失败告终还会留下千古骂名，可谓是冒最大的险圆最渺茫的梦，所以冷静下来的薛无常又犹豫了。
他在“反”与“不反”之间摇摆不定，却不曾想皇上和太后对自己的一举一动了如指掌，他自认为自己事情做的隐蔽，实在不知道到底是哪里走露了风声。
做都做了，虽然他并不惧怕这对母子，可是念着旧情，还是想在冯太后心里留点好印象，他并不想这么快就被对方知道自己的打算，不过，现在说什么都来不及了。
他苦思冥想，得出的结论就是：问题出在顾行之那。
顾行之当年用裴度的人头换取自己的信任，江山易改，本性难移，现在他也很可能用自己的秘密去讨好冯太后和皇上。薛无常开始回忆：顾行之这些日子很反常，自己好几次派人相邀他都坚决闭门不出，和之前对自己的殷勤热络判若两人，他和自己越来越疏远，却和流钰长公主走的近，难道顾行之已经暗中倒戈了？