当寺の創建は定かではない。新光寺略縁起に、遊石山観音院と号し、本尊の聖観音は、行基大士の作と伝え、慶安２年（１６４９）に観音堂領として、幕府から六石の朱印が出されている。寛政２年（１７９０）の寺社書上には、「三間四面のお堂」と記録されている。草堂に観音像を安置したのがこの寺の始まりであろうか。

また、『新編武蔵風土記稿』や『吾妻鏡』『武蔵野話』『江戸名所図絵』などの地誌に、建久４年（１１９３）源頼朝が那須野へ鷹狩に向かう途中、ここで昼食をとった折り、その時の幕舎の地を寄進している。その後元弘３年（１３３３）新田義貞が鎌倉攻に向う途中、当寺に立寄り戦勝を祈願したことなどが記載されている。

更に、聖護院門跡道興准后の『廻国雑記』に、野老沢の観音院に、福泉と言う山伏がいて、酒の肴にとろろいもを出したので『野遊のさかなに山いもそいて、ほりもとめたる野老沢かな』と書いている。当寺は旧鎌倉街道の傍にあって、この附近が所沢の地名と集落発生のところとされている。

徒歩

實蔵院から北へ徒歩３分。

自動車

實蔵院付近は一方通行のため鍵形に曲がって、元町交差点を過ぎ、東川に架かる小さな橋を渡り、すぐ左折する。
境内に駐車可。

除夜の鐘修正会

１月１日  ０時〜２時
先着１０８名まで除夜の鐘撞に参加できる。甘酒の接待あり。

観音まつり

４月１８日  １１時〜１６時
昔の「馬の町」縁日。大護摩供奉修。その後カラオケ大会を催す。参詣者も参加可能。

星（祭）供  護摩供奉修

１２月２２日  ６時〜８時
一般でも護摩供祈祷を申受ける。

観音経読誦会

毎月１８日  １９時半〜２０時半
一般でも参加できる。

白木蓮、桜、特に枝垂桜は見事である。

百日紅、木犀

山茶花、特に銀杏、モミジ、桜などの紅葉がよい。

初冬から春先まで椿の花が大変よい。