，房玄龄多次呈表请求免去尚书左仆射职务。
李世民批复说：“选贤任能的关键，应以不存私心为根本；事奉国君的原则，应以当仁不让为美德。各个时代都靠这弘扬教化，所有贤良都靠这协调关系。你忠诚谦恭，正直厚道。天下混乱之时帮我谋划建立功业，玄武门事变之前帮我扫平登极道路。你为朝臣们树立了楷模，按法度处理政务；辅佐太子，声望成就都如此显著。可现在忘掉了根本原则，拘泥于琐细规矩，虽然接受了太子少师的职务，却推辞襄理政务的重任，难道这就是所说的辅佐我一人共同安天下吗？”
房玄龄于是担任尚书左仆射的同时兼任太子少师。
这时皇太子李治就要举行拜师仪式，备办了礼物等着他，房玄龄迫切地希望降低自己的权位，又不敢上表陈述，就自动回家去了。
他这样的行为，让有识之士见了，没有不尊重他的辞让精神。
房玄龄自从官居中书令、尚书左仆射十五年时间，女儿嫁给了李世民的儿子韩王李元嘉为妃，儿子房遗爱娶李世民的女儿高阳公主为妻，一时显贵到了极点。
他多次呈表辞职，李世民老是劝阻。
贞观十六年，房玄龄和高士廉等人合作编写成《文思博要