隋代仁寿元年，隋文帝杨坚到这里消夏避暑，见此地风景优美，便下旨在这里修建一座行宫，名为仙游宫。
到了唐代，仙游宫改为三个寺院，一个寺院已经无存，留下的两寺分隔在黑河南北两岸。南岸的就是仙游寺，亦称南寺，明代曾改名为普缘禅寺。清朝康熙年间重修寺院，又恢复了仙游寺的旧称。
仙游寺四周山清水秀，峰峦环峙，环境清静幽雅，白居易任县尉时，常与文友到此把酒谈诗论文，纵谈天下国事。
据陈鸿《长恨传》记载，元和元年十二月，白居易为周至县尉时，与王质夫、陈鸿游于仙游寺，因话及昔年玄宗与杨妃的爱情悲剧，相与感叹，并请白居易作歌以传其事。白居易应命写《长恨歌》，“一篇长恨有风情，十首秦吟近正声”，不朽的长篇叙事诗《长恨歌》，就在这里写成。
对于白居易《长恨歌》的主题思想，究竟是赞美唐玄宗与杨贵妃坚贞不二的爱情，还是讽刺唐玄宗的荒淫误国，或者是谴责杨贵妃祸水红颜？
一直是众说纷纭，莫衷一是。南宋洪迈在《容斋随笔》中，谈到白居易有几个侍姬，其中有桃叶、樊素、小蛮、紫绡、红绡等。他说白居易身体有病而遣返了侍姬樊素，因此写诗说：两枝杨柳小楼中，袅娜多年伴老翁；
明日放归归去后，世间应不要春风。樊素归去后，白居易不能忘怀，又写下了“病***乐天相伴住，春随樊子一时归”，“金羁骆马近贳却，罗袖柳枝寻放还”，“觞咏罢来宾阁闭，笙歌散后妓房空”等诗句。
洪迈说：“读了这些诗后，感叹白居易不能忘情，禁不住凄然于胸。”由此可见，白居易是一个“多情种子”，所以说他以写《长恨歌》来抒发自己的感情是不无道理的。