諸説ありますが、昔、漁師の網にかかった十一面観音をこの地に祀ったのが「玉川観音」の始まりと云われています。
この観音像は唐様式で、泰澄大師の作とも云われています。
以前は天然の洞窟の中にありましたが、平成元年(1989)の崩落事故の後、安全のため平成6年（1994年）に現在の場所に移りました。
海際の鳥居をくぐるとコンクリートによる人工トンネル内に本殿があり、不思議な雰囲気を醸しだしています。
2015年12月末には、地元の人たちで構成される「上岬地区を良くする会」により、越前焼の灯りとりが内部に設置され、より幻想的な空間となりました。
