据说在很久以前，这里一马平川，唯有一座大山，高100多米，每当夜幕来临时，山顶峰总会发出耀眼的金光。王母娘娘得知后，特派山神来此看守。山神在此守了十几年都平安无事，然而，就在一天晚上，山神老朋友太白金星路过此地来看望山神。两神十几年未见，自然喜不自禁，遂拿出好酒喝将起来，不知不觉两个时辰过去了，山神不胜酒力，醉卧桌旁。而太白金星也感觉不支，于是稍稍歇息之后起身告辞。时辰不大，金塔山山顶上传来山崩地裂之声，顿时大块石土向四面八方散去，落在哪儿，哪儿就变成了小山丘。巨响惊醒了睡梦中的山神，他站了起来，端着酒壶向外走去。他来到洞口，发现外面的金光消失了，又掐指一算，得知宝物被盗，他知道天庭饶不了他，便准备逃跑。

    王母娘娘在天宫得知镇山之宝被盗，大发雷霆，亲自下凡追捕山神。刚逃出不远的山神，很快就被王母追上。王母二话不说用神杖一指，就把山神变成石人，让他永无出头之日。

    山上的金光消失了，但多了一个石人，山不再是从前的百米高山了，而变成了一座座山丘，加上石人坐落在两坡之间的沟中，因此那座山改名叫做“石人沟”。