小金頂廟又叫高臾奶奶廟。其由來，衆說紛紜，最具神話色彩的是“繡花鞋”的傳說。
相傳在很久很久以前，有一位神仙叫做金頂真人，被尊稱爲“金頂爺爺”，有一天，金頂爺爺駕雲仙遊，路過高臾，他發現這裏靈氣充足，土地肥沃，地勢平坦，水源豐富，便準備在此地安置仙府。他取出隨身攜帶的寶弓，搭上金箭，射向地面，於是方圓十里金光閃耀，這是神仙們的一種標誌，表示此方土地已歸金頂爺爺所有，準備有空在此建立仙府。金頂爺爺走後，高臾奶奶也來到此處，也看中了這方風水寶地，可惜看到了金頂爺爺留下的寶箭，知道這裏已被金頂爺爺佔下。可是這方寶地太有誘惑力了，高臾奶奶心生一計，來到金頂爺爺的寶箭旁，用神力拔出寶箭，把自己的繡花鞋埋在了土裏，又把寶箭插在了繡花鞋上，看不出什麼痕跡便飛走了。過了一段時間金頂爺爺與高臾奶奶在此相遇，金頂爺爺說這是他先看中的風水寶地。高臾奶奶說是她先佔下的，並且讓金頂爺爺說出理由。金頂爺爺說我在這裏留下了我的寶箭。高臾奶奶說我在這裏留下了我的繡花鞋。金頂爺爺拔出自己的寶箭，發現寶箭上穿着一隻繡花鞋，高臾奶奶說，你射箭的時候，我的繡花鞋已經埋在了這裏，你說到底是誰先佔下的。金頂爺爺知道被高臾奶奶擺了一道，可實在拿不出別的證據，另外心中也愛慕高臾奶奶，說了一句：好男不和女鬥（相傳“好男不和女鬥”便出自這裏，不過沒有史料考究），便向西飛走了。高臾奶奶在這裏修建了高臾奶奶廟
