荣王寺，据说是前代某位姬家宗室亲王捐资修建，后来那位亲王坏了事、晚景凄凉，连累这寺院也是树倒猢狲散，一度成为无人问津的荒园鬼寺。
一直到十几年前，琅琊郡王受封开府时，上奏说不愿大兴土木劳民伤财，得天子允准后，这才修缮一翻，将荒寺改建成了王府。
琅琊郡王，乃当今天子膝下第三子——汝南王姬天养的第一个封号。
当初刚刚成年的姬天养被封为郡王、钦赐王府一座的消息一出，朝野上下无不惊诧，只因其生母不过是一个卑微宫女，且早早就过世，姬天养纵为皇子，却无母家帮衬，在偌大的皇宫中便如无根浮萍一般，能苟活下来已殊为不易，何德何能封王开府，更得到汝州琅琊郡这等民多田广的膏腴之地？
然而姬天养确有出众才略，就藩三年而郡国大治，内无饥馑、外无盗贼，百姓军吏皆呼为贤王，又三年，功绩更著，且平定临郡邪教作乱有功，天子闻之喜悦，加封二郡，实领汝州南部三郡近乎半州之地，遂改王号为汝南王。
至于这座并未随之更名的王府，只在汝南王进京朝见时才能多些人气，大多数时候则只有少数家仆奴婢在看守洒扫，又兼地处偏僻，除去左近一众工部官员，门前少有车马经过，清静得