始琢磨怎样才能去慈福宫，但很快突发一事，暂时打破了这一计划。
这两年赵怀玉在外为官，政声颇佳，传至皇帝耳中，皇帝有意提拔他，便命他还京，召试馆职。赵怀玉不负所望，表现极好，入了馆阁，皇帝便迁他为校书郎，还特意让人拨了处官舍供他与母亲居住。
因他的宗室身份，皇帝一直对他另眼相待，是以他官阶虽不高，却常有入对面圣的机会。这日皇帝又召他入延和殿，让他就此前策论中提到的国事与太子细细论述。赵怀玉讲解完毕，太子表示心悦诚服，皇帝亦龙颜大悦，厚赏赵怀玉一些文玩，随后闲谈时又问他是否成家，赵怀玉赧然说尚未娶妻，皇帝奇道：“未婚士子一旦金榜题名，必有大臣豪室前去提亲。卿早有功名，为何还未成婚？”
赵怀玉朝皇帝深深一揖，道：“陛下，实不相瞒，臣赴贡举之前曾寓居浦江，在那里遇见一位女子，心仪许久，可惜那女子后来应选入宫，做了尚食局内人。臣难以忘情，所以独身至今。”
“来自浦江的尚食局内人……莫非是吴蒖蒖？”皇帝讶异道，旋即暗想，赵怀玉此番说出此事明显是想求娶蒖蒖，必须先绝了他这念头，遂不待赵怀玉回答便笑道，“只是很不巧，吴蒖蒖数日前刚被朕赐给太子。”