当地の豪族・杉治太夫氏が開基となり、永禄元年（１５５８年）に現在ものこる観音堂が建立されました。後に、川上郡備中町西山にある長松寺４世隆室慶興大和尚を御開山として、元和５年（１６１９年）に長谷寺を開創しました。
その後、文化５年（１８０８年）から３年かけて、５世中興建山文勇大和尚により現在の本堂及び庫院等の伽藍が整備されました。
明治１５年（１８８２年）には、１０世万安黙全和尚により寺を中心に３３体の観音像が安置され、西国観音霊場が開かれました。
現在も年３回の観音講を行っています。
その後、文化５年（１８０８年）から３年かけて、５世中興建山文勇大和尚により現在の本堂及び庫院等の伽藍が整備されました。
明治１５年（１８８２年）には、１０世万安黙全和尚により寺を中心に３３体の観音像が安置され、西国観音霊場が開かれました。
現在も年３回の観音講を行っています。
