跋扈的人，这是他的另一面。
正是这一面，造成了他与同僚的仇隙不合，以致招来物议，酿成了以后被逐的悲剧。
在隆庆四年，公元1570年七月，曾也是裕府旧僚的大学士陈以勤，因与高拱有小嫌，又见高拱在内阁不可一世，恐终不为所容，便激流勇退，引疾罢去。
不久，掌都察院大学士赵贞吉因高拱挟私憾考科道，上疏请止。高拱不悦，与之相倾，嗾使门生、给事中韩楫弹劾赵贞吉庸横。
赵贞吉也抗章劾高拱。
朱载坖对高拱的信任，并不在于其他大臣对高拱的弹劾，他令赵贞吉致仕，也就是退休了。
赵贞吉曾因高拱以内阁掌吏部，权如真宰相，请李春芳谋与掌都察院，以遏高拱全力，李春芳答应了。
如今，赵贞吉离开后，李春芳心中不安，他又曾因徐阶事与高有隙，所以，在朝廷里呆不住了，于隆庆五年，公元1571年五月乞休归田。
就这样，高拱挤走了李春芳，成功接任首揆，成为内阁首辅。
这时候的他，按道理来说，权力在手了，对大明的贡献应该更大。
可惜没有！为什么会这样呢？
因为他越来越趾高气扬，