감악산은 옛부터 바위사이로 검은 빛과 푸른 빛이 동시에 쏟아져 나온다하여 감악(紺岳), 즉 감색 바위산이라 불렸다. 예로부터 가평 화악산, 개성 송악산, 과천 관악산, 포천 운악산과 더불어 `경기 5악"의 하나로 알려져 왔으나 일반인에게는 그리 잘 알려져 있지 않았다. 장군봉 아래는 조선 명종 때 의적 임꺽정이 관군의 추적을 피해 숨어있었다는 임꺽정굴이 있으며, 설마리 계곡에는 6.25전쟁과 관련한 영국군 전적비와 대한의열단 전적비가 있다. 또한, 이전에는 감악사, 운계사, 범륜사, 운림사 등의 4개 사찰이 있었다는데 현재는 1970년 옛 운계사 터에 재창건한 범륜사만 남아 있다.