普乐寺的兴建，乾隆最初的用意，并不像普宁寺、安远庙那样，针对具体的历史事件，而是觉得从安远庙、普宁寺向南面馨锤峰一带望去，还有较大的空地可以建造一组寺庙。为使避暑山庄外寺庙整体合理布局，建造了这座寺庙。至于碑文中所说的普乐寺的建造是为了新归附的杜尔伯特、左右哈萨尔、东西布鲁特提供瞻仰的地方，不过是“顺水推舟”而已。因为左右哈萨克、东西布鲁特民族并不信奉喇嘛教，而信仰伊斯兰教。不过，让他们觐见时游览一下寺庙，来看看天朝大国的宏大气势，使之“兴其肃恭”之意倒是乾隆的本意。
乾隆皇帝为寺题名“普乐”出自范仲淹《岳阳楼记》中的“先天下之忧而忧，后天下之乐而乐”的名句，有普天同乐之意。使天下由宁（普宁寺）而安（安远庙），由安而乐（普乐寺）。普乐寺修建于乾隆三十一年（1766年），占地面积2.4万平方米，坐东面西，依山就势，面向避暑山庄，与外八庙其它寺庙呈众星捧月环绕避暑山庄周围，以显示各少数民族团结在清政府周围。