阿星山の北東麓にあり、常楽寺の西寺に対して東寺と呼ばれる天台宗の古刹です。
長壽寺は奈良時代、良弁僧正によって建立された勅願寺で、現在国宝に指定されています。その昔、聖武天皇には世継ぎがなかったので、良弁僧正が阿星山中の瀑布に籠って子宝の祈願を行ったところ、間もなく皇女の降誕を得ました。天皇は、我が子の長寿を願い七堂伽藍廿四坊の寺を建立し長壽寺という寺号をおくり、さらに行基菩薩に子安地蔵を刻ませ本尊としました。これが長壽寺の始まりと伝えられています。