国丈王仁皎时任将作大匠，这些年把主要精力用在兴庆宫的建造之上。兴庆坊改作兴庆宫，其原有建筑基本上全部拆除，工程量可谓浩大无比。王仁皎看罢兴庆宫的建设图样，又听皇帝言及“花萼相辉楼”和“勤政务本楼”，深知皇帝最为关切此二楼，遂督促将作监加速建设。转眼到了开元四年的春天，“花萼相辉楼”建造成功，“勤政务本楼”也初具大致模样。为了装点“花萼相辉楼”四周景物，王仁皎从全国各地移来奇树名花，错落有致地种植在此楼的周围。初春的风儿拂过，可闻清香扑鼻，园中花树上的花萼粉嫩相依，确实合了“花萼相辉”之意。

    王仁皎数次促请李隆基观摩“花萼相辉楼”，某一日阳光明媚，李隆基忽然兴起出外舒展筋骨之意，遂派人唤来王仁皎，令其带同前往兴庆宫视察。

    太极宫与大明宫皆有夹道相连，并与四方城墙相通，王仁皎此次又在兴庆宫修建夹道与东城墙联为一体，则李隆基自太极宫乘舆从夹道中即可到达兴庆宫。

    李隆基登上“花萼相辉楼”，纵目四观，就见与其相对的“勤政务本楼”已初具模样，其他的一些殿堂也出了地面，不免有些凌乱之感；然此楼周围花木葱茏，实为一个幽静而雅致的所在，心中就大为满意。

    王仁皎禀道：“陛下，整个兴庆宫全部建成，大约还需三年的时日。如今国家草创时期，臣不敢多添劳力，以致耽搁了时日。”

    李隆基赞道：“好嘛，你能体会朕意，不扰百姓，实为好事。太极殿虽有些旧，毕竟还能住人，也不急在这一时。这‘花萼相辉楼’建得不错，即使其他地方建造未成，朕也可以在此宴饮兄弟嘛。”

    李隆基说到这里，忽然勾起心事：此楼虽建好，然兄弟们散归各处，又如何能宴饮相聚呢？

    他此后闷然回到太极殿，让高力士唤来姚崇说话。

    李隆基道：“朕刚才到兴庆宫走了一圈，有些触景生情啊。”

    姚崇摸不着头脑，心想兴庆宫那里建设正酣，又有什么好景了？

    李隆基接着道：“朕前天去见太上皇，太上皇忽然问起宁王他们。朕今日到了兴庆宫，顿时想起昔日‘五王宅’兄弟相聚的情景，如今物在人非，兄弟们星散四方，朕心中滋味很不好呀。”

    姚崇恍然大悟，心中暗想当初让诸王出京分赴各地，那是为保皇权而采取的预防手段。然皇帝如今的口吻中，似乎让他们兄弟分离，分明是姚崇挑的事儿。姚崇心中不禁苦笑：谁让自己处此位置呢？那么贬功臣散兄弟的恶名，只好自己坦然担当罢了。姚崇想到这里，急忙答道：“陛下仁孝且友悌兄弟，此为天下皆知的事儿。新春过后，宁王等新宅皆已建成，且与兴庆宫毗邻，臣以为，可宣宁王等人返京，从此与陛下旦夕一起，与太上皇共享天伦之乐。”

    李隆基颔首道：“朕召你过来，就是想办这件事儿。朕前日去见太上皇，觉得父皇的身子骨一日不似一日，若兄弟们皆侍奉在父皇周围，说不定父皇的身子骨会大好起来。”

    姚崇知道，经过此前数年来君臣努力，国势逐渐恢复且平稳，李隆基的皇权已至高无上，几无可撼动之人。当此时机，若令诸王返京，其与李隆基的皇权无碍，且能周全李隆基的名声，殊为好事。

    此事于是被定了下来。

    李隆基又问道：“姚卿，张嘉贞为相，可堪为托吗？”

    姚崇道：“陛下钦定之人，焉能不堪？只是嘉贞性格简疏，且太信他人，行事不免有些毛糙，容易误事。臣知其短，已数次直言相劝，相信其历练一些时日，当有进步。”

    李隆基前一夜忽发奇想，由此将一个不知名之人擢为相职，如此简拔方式和授任过程实在有点过于简单。他闻姚崇之言笑道：“若张嘉贞完美无比，他就不宜居此相位。