当下玄宗大喜，即赐宴于庆云亭上，赐与冠袍，又赐与邸第，尊称为罗仙师。自此公远常与张、叶二人，议论仙家主旨，相互爱护。过了几日，张果、叶法善具疏，坚请还山，道：“罗公远道术殊胜臣辈，留彼在京，足备陛下咨访。臣等出山已久，思归念切，乞赐放还，以遂臣等野性。”玄宗知其归志已决，不便强留，准其暂回家山，有问之处，再候宣召。二人谢恩出京，凡玄宗天子所赐之物，及各官员所赠之珍奇，一无所受，二人遂各飘但是去。恰是：
天子殿前去奸相，阎王台下到杀囚。
次日，入见杨妃，赐宴宫中，密意畅叙。禄山道：“儿非不恋，但势不成久留，明日便须告别。”杨妃道：“吾亦不敢留你，明日辞朝后速走勿迟。”禄山点头会心。次日奏称边政重担，不敢旷职，告别回镇。玄宗准奏，亲解御衣赐之，禄山涕零拜受，本日辞朝谢恩。随行之时，走马至杨国忠府第，仓促一见，马上飞星出京，日夜兼行，不日到镇。他恐国忠请奏留之，故此吃紧回任。自此玄宗更加亲信，人有首告禄山欲反者，玄宗命将此人缚送范阳，听其究治，由是人无敢言者。禄山自此益无顾忌，因想：“三镇当中，守把各险要处的将士，都是汉人；倘他日如有行动，必不为我所用，不如以番将代之为妙。”遂上疏奏称，边庭险要之处，非武健过人者，不能守御；汉将荏弱，不若番将勇猛，请以番将三十一人，代守边汉将。疏上，同平章事韦见素进言说道：“禄山久有异志，今上此疏，反状明矣，其所请必不成许。”玄宗不悦，说道：“向者边政俱用文臣，渐至武备废弛；今改用番报酬节度，边庭壁垒一新，即此看来，安见番人不成以代汉将？禄山为国度计，欲慎固封守，故有此请，卿等何得动言其反？”遂不听韦见素之言，即就批旨：依卿所请奏，三镇各险要处，都用番将戍守；其旧戍汉将，调本地别用。自此番人据险，禄山愈得其势，边事不成问矣。恰是：
转刹时已近月宫，公远扶住车子，玄宗凝眸一望，只见月中宫殿重重，流派敞开，遥见内里琪花瑶草，映耀夺目，远胜昔日梦中所见。玄宗道：“可入去否？”公远道：“陛下虽贵为天子，却还是凡躯，未容遽入，只可在内里张望。”少顷只闻得异香氤氲，一派乐声宏亮，仔谛听之，恰是霓裳羽衣曲。玄宗听罢，低声问道：“世人称仙颜女子，必比之月里嫦娥，今嫦娥已在天涯，可使朕一睹其冶容乎？”公远道：“昔穆天子与王母相会，夙有仙原因也，陛下非此之比，今得至此，瞻仰宫殿，已是奇福，岂可妄生轻亵之念。”言未已，忽见月中流派尽闭，光彩四散，北风袭人，公远即唤白鹿来驾彩舆，以羽扇障风而行，少顷冉冉有声及地。公远道：“陛下几触嫦娥之怒，且喜万安。”玄宗才下车，只见彩舆仍化为桂枝，白鹿亦不见，快意仍在公远手中。玄宗又惊又喜。当下公远告别回寓。玄宗还独坐呆想，啧啧叹异。那内监辅璆琳，因怪公远不准他同往，便进言道：“此把戏惑人，何足惊奇，愿皇爷切勿轻信。”玄宗道：“就是把戏，亦殊可喜，朕当学其一二，觉得娱悦。”辅璆琳便巴结道：“把戏中惟隐身法可学，皇爷若学得时，便可暗察表里人等奥妙之事。”玄宗喜道：“汝言甚是。”