淡窓が最初に塾を開いた寺院の本堂が現存する。当時、出身僧侶が京都の高倉学寮の講師となるなど、日田における学問の中心であった。幼少時の淡窓はこの寺の僧侶に学び、その人間形成に影響を受けている。