云臺(tái)山歷史悠久，文化底蘊(yùn)相當(dāng)深厚。解放后，在云臺(tái)山山腳下的高廟村挖掘出土了齊家文化類型的紅陶罐、漢代灰陶盆等文物，還有新石器時(shí)期的仰韶文化遺址。相傳很早以前，這里居住著一個(gè)姓高的農(nóng)戶，他主持在云臺(tái)山的山頂上建了一座東岳泰山廟，故起名曰高家廟。雖然高家廟到底建于何時(shí)，暫時(shí)無(wú)從考證，但最遲可推至北宋崇寧年間，距今已有900多年的歷史。當(dāng)時(shí)，廟內(nèi)就已經(jīng)建有無(wú)量殿、靈官殿、圣母宮等宮殿。明洪武年間在廟宇四周筑起了堡墻，至今在云臺(tái)觀四周還有一些斷壁殘?jiān)梢?jiàn)一斑。清雍正三年（1725年）建鐘樓一座，并鑄八卦大鐘一鼎，據(jù)說(shuō)這鼎大鐘的聲音洪亮，音色純正，方圓五六十里都能聽(tīng)到鐘聲。民國(guó)9年大地震，廟宇多數(shù)被震塌。1987年，附近群眾自籌資金重修無(wú)量殿、靈官殿、圣母宮、社稷宮和鐘樓，這些宮殿的內(nèi)外均有彩繪壁畫，共有大象塑像16尊。其中靈官殿有邑人安維峻敬書(shū)的“護(hù)國(guó)佑民”牌匾一面；圣母宮懸有蕭嫻題寫的“圣母宮”牌匾一面，魯岱山下氏許行題寫的“九天云裊”牌匾一面。

云臺(tái)山西北邊的山腳下建有高大雄偉的云臺(tái)山劇場(chǎng)，每年春、秋兩季，當(dāng)?shù)厝硕家诖烁髋e行一次大型廟會(huì)，每次都要請(qǐng)有一定知名度的劇團(tuán)唱四天四夜的秦腔。每到舉行廟會(huì)的時(shí)候，云臺(tái)山上下燈火輝煌，看戲的、焚香的、買貨的，各地游客與商販絡(luò)繹不絕，簡(jiǎn)直熱鬧極了。此時(shí)，云臺(tái)山變成了當(dāng)?shù)厝罕婇_(kāi)展文化娛樂(lè)活動(dòng)和進(jìn)行商貿(mào)交流的重要場(chǎng)所。

1989年，云臺(tái)山高家廟仰韶文化遺址被列入縣級(jí)文物保護(hù)單位，立碑建檔，加以保護(hù)。