เขากำแพงจึงได้ชื่อว่าเป็นภูเขาที่ยังคงมีความอุดมสมบูรณ์ที่สุด และ มีไม้ที่มีคุณค่าอยู่หลากหลายชนิด อันเป็นผลเนื่องมาจากความศักดิ์สิทธิ์และเรื่องเล่าขานเกี่ยวกับความลี้ลับของเทือกเขากำแพงที่มีเรื่องเล่าต่าง ๆ มากมาย โดยเฉพาะการพบซากเจดีย์บนยอดเขา ซึ่งประชาชนในพื้นที่ตั้งชื่อว่าเขาลูกพระเจดีย์ ประกอบด้วยความที่เทือกเขากำแพง มีความสูงเด่นกว่าเขาลูกอื่นในพื้นที่