寺伝によれば651年/白雉2年、孝徳天皇の勅願により法道仙人が開山したとされ、延命地蔵と称する地蔵菩薩を本尊とする。さらに747年/天平19年、行基が薬師堂を建立し、823年/弘仁14年、嵯峨天皇の勅願により三重塔を建立したとの伝えもある。山号は岩嶺山。