平清盛が娘 徳子の安産祈願の帰りに嵐に遭遇。赤子を心配した清盛は、石膏に地蔵を彫ることを命じました。
その後、地蔵が完成する前に赤子は無事に誕生しました。
清盛は喜び、まだ耳のついていない未完成の地蔵をそのままの姿で祀ったといわれています。