受佛学影响，静心寡欲，不慕世利，更不想参与政治，朝廷一再请他出来做官，他都婉辞不就，后来。为避免得罪王室。他便来到钱塘江边的一个小邑永兴隐居。
最后。皇帝的征诏又不断的下来，他在永兴亦是无法居住，最后，不得不抛弃家产，迁居到他处，皇帝看他为了隐居，连家产都不要了，可见去意已决。从此也不再征诏他了。
根据史料记载，王羲之晚年隐居在金庭，而许询也特地从隐居之处赶过来与王羲之为邻，李白有一首诗云：“此中久延伫，入剡寻王许。”诗中所指的王许，就是王羲之和许询。
“这位公子慧眼如炬啊，竟能一眼认出我这个无名之辈。”许询仔细打量了一下陈逸，面带笑容的说道。
“许先生清谈玄理之名，名扬天下，又如何能是无名之辈呢。比起先生来，无名之辈应是我才对。”陈逸笑了笑。这许询在永兴隐居之前，清谈玄理的声名就已然非常显赫。
魏晋八君子之一，东晋著名清谈家刘真长，就说过许询才情过于所闻，只不过刘真长无意贬低许询，只是说他的名声实在太大了。
“有趣的年轻人，之前听闻逸少兄说你书法才气惊人，气度不凡，我也有些怀疑，现在书法我未得见，这气度却真是不凡