情都会与王夫人商议，因此王夫人知道甚多。
陆观推行新政，特别是针对官员这块，限制荫恩，削减职田，对于官员的升迁考核严格，致使大部分官员视他为仇敌，提起陆观就恨得咬牙切齿。虽然有皇帝支持，但如果大多数人都反对，皇帝迟早会转变想法。
王夫人想的没错，陆观现在的处境很不妙，新政才推行不到一年，朝中反对的声音一波接一波，但摄于陆观的权威，御史台不敢直接指出他的不是，于是上书弹劾陆观亲近重用的人，朝中矛盾激发。
宫里，萧贵妃则在皇帝耳边吹枕边风。萧贵妃的父亲、伯父及其他亲眷都封了官，按陆观推行的政策，萧家人这官根本做不下去，考核就过不了，给外戚的荫恩也被砍了掉了一大半，萧贵妃心中不喜，整日在皇帝耳边说陆观的坏话，说陆观变祖宗的规矩，要弄的天下大乱。
皇帝虽然训斥了萧贵妃，但心中开始动摇。这时候，御史台又添了一把火，上书弹劾参知政事李安国。陆观立刻上书为李安国辩护，同时自请辞去宰相的职务。
在这种情况下，枢密院、谏院等人纷纷弹劾陆观，朝中竟无一人为他说话，无奈之下，陆观只能固辞宰相之位。
陆观被罢官，在家中悠闲度日