正楽寺は、真言宗高野山派で、山号は日光山。創立は奈良時代の天平勝宝年間（７４９〜７５６）に報恩大師が備前48ヶ寺を開創したとき、そのひとつとして建立したと伝えられる古刹です。鎌倉時代、正安6年（１３０４）に信賢上人が現在の地に建立しました。