奥多摩町は面積の9割以上が山林で、全域が国立公園となっている。鳥居があり、お社からは鳩ノ巣渓谷が見える。江戸時代中期、奥多摩地域の木材は多摩川を通り江戸へ運ばれていた。鳩が社に巣を作っていたことが鳩ノ巣という名称の由来。