이 지역은 호남에서 영남으로 가는 길목에 있어 삼국시대에는 백제에서 신라로 가는 요로였으며, 고려 때 왜군과 거란병이 침입하였을 때, 인근 수십여 곳의 군현이 도륙되었는데도 여기에 사는 주민들과 이웃 군민들은 이곳으로 피하여 그 참화를 면하였다고 한다. 이러한 연유로 도통사 최영장군은 이곳에 산성을 축조하고 창고를 지어 불의의 변에 대비하기를 청하였고, 조선 세종 때의 체찰사 최윤덕도 이곳을 살펴본 뒤 반드시 축성하여 보존할 곳이라고 건의한 바 있는 사실로 미루어 보아, 이 산성은 고려 말에 축조된 것으로 추정되고 있다. 그후 임진왜란이 끝난 1614년(광해군 6년)에 실록을 보관할 사고가 설치되었고, 1633년(인조 11년)에는 청나라의 침입에 대비하여 묘향산에 있던 사고를 이곳으로 옮겨 보관하였다. 계속하여 1641년에는 선원각·군기고·대별관을 세우고, 1643년에는 산성의 수호대책으로서 승군을 널리 모집하고자 호국사를 창건하였는데, 이들은 별장·참봉·승장 들이 거느리는 조직에 의하여 수호, 보존되었다.