云臺山歷史悠久，文化底蘊相當(dāng)深厚。解放后，在云臺山山腳下的高廟村挖掘出土了齊家文化類型的紅陶罐、漢代灰陶盆等文物，還有新石器時期的仰韶文化遺址。相傳很早以前，這里居住著一個姓高的農(nóng)戶，他主持在云臺山的山頂上建了一座東岳泰山廟，故起名曰高家廟。雖然高家廟到底建于何時，暫時無從考證，但最遲可推至北宋崇寧年間，距今已有900多年的歷史。當(dāng)時，廟內(nèi)就已經(jīng)建有無量殿、靈官殿、圣母宮等宮殿。明洪武年間在廟宇四周筑起了堡墻，至今在云臺觀四周還有一些斷壁殘垣可見一斑。清雍正三年（1725年）建鐘樓一座，并鑄八卦大鐘一鼎，據(jù)說這鼎大鐘的聲音洪亮，音色純正，方圓五六十里都能聽到鐘聲。民國9年大地震，廟宇多數(shù)被震塌。1987年，附近群眾自籌資金重修無量殿、靈官殿、圣母宮、社稷宮和鐘樓，這些宮殿的內(nèi)外均有彩繪壁畫，共有大象塑像16尊。其中靈官殿有邑人安維峻敬書的“護國佑民”牌匾一面；圣母宮懸有蕭嫻題寫的“圣母宮”牌匾一面，魯岱山下氏許行題寫的“九天云裊”牌匾一面。

云臺山西北邊的山腳下建有高大雄偉的云臺山劇場，每年春、秋兩季，當(dāng)?shù)厝硕家诖烁髋e行一次大型廟會，每次都要請有一定知名度的劇團唱四天四夜的秦腔。每到舉行廟會的時候，云臺山上下燈火輝煌，看戲的、焚香的、買貨的，各地游客與商販絡(luò)繹不絕，簡直熱鬧極了。此時，云臺山變成了當(dāng)?shù)厝罕婇_展文化娛樂活動和進行商貿(mào)交流的重要場所。

1989年，云臺山高家廟仰韶文化遺址被列入縣級文物保護單位，立碑建檔，加以保護。