，而命张俊、岳飞前往楚州措置战守事宜。
秦桧既得宗弼之信，便极力营谋，必欲置岳飞于死地。先提拔其党羽万俟禼为右谏议大夫，再授意其于七月上疏，先指岳飞“爵高禄厚，志满意得，平昔功名之念，日以颓坠”；再提增援淮西之事“稽违诏旨，不以时发”；又称其淮东视师，“沮丧士气，动摇民心”；另不忘隐约暗示之前岳飞撂担子上庐山一事，“日谋引去，以就安闲”。
赵构倒未立即就此表态，但岳飞遭此弹劾，既难忍受亦意识到处境堪忧，次月便累表请罢枢柄，赵构很快准奏，罢去他枢密副使之职，改任他为武胜、定国军节度使，充万寿观使。
岳飞改任宫观闲职后，秦桧再无顾忌，与张俊密谋，欲重金悬赏，诱岳飞部将告发岳飞过失，却无人应命。后张俊又听说岳飞曾因故欲斩部将统制王贵，且屡加刑杖，便劝王贵对岳飞加以攻讦。王贵一听连连摆首，道：“大将手握兵权，总不免以赏罚使人，若以此为怨，将怨不胜怨了。”但张俊并不就此作罢，改以私事要挟，终令王贵胆怯，勉强就范。
随后张俊又买通屡受张宪抑制的副统制王俊，命王俊向王贵告发岳飞副都统制张宪，诬陷其在岳飞交出兵权后欲裹挟岳家军离去，以此威逼朝廷还兵于岳飞