云臺山歷史悠久,文化底蘊相當深厚。解放后,在云臺山山腳下的高廟村挖掘出土了齊家文化類型的紅陶罐、漢代灰陶盆等文物,還有新石器時期的仰韶文化遺址。相傳很早以前,這里居住著一個姓高的農戶,他主持在云臺山的山頂上建了一座東岳泰山廟,故起名曰高家廟。雖然高家廟到底建于何時,暫時無從考證,但最遲可推至北宋崇寧年間,距今已有900多年的歷史。當時,廟內就已經建有無量殿、靈官殿、圣母宮等宮殿。明洪武年間在廟宇四周筑起了堡墻,至今在云臺觀四周還有一些斷壁殘垣可見一斑。清雍正三年(1725年)建鐘樓一座,并鑄八卦大鐘一鼎,據說這鼎大鐘的聲音洪亮,音色純正,方圓五六十里都能聽到鐘聲。民國9年大地震,廟宇多數被震塌。1987年,附近群眾自籌資金重修無量殿、靈官殿、圣母宮、社稷宮和鐘樓,這些宮殿的內外均有彩繪壁畫,共有大象塑像16尊。其中靈官殿有邑人安維峻敬書的“護國佑民”牌匾一面;圣母宮懸有蕭嫻題寫的“圣母宮”牌匾一面,魯岱山下氏許行題寫的“九天云裊”牌匾一面。
云臺山西北邊的山腳下建有高大雄偉的云臺山劇場,每年春、秋兩季,當地人都要在此各舉行一次大型廟會,每次都要請有一定知名度的劇團唱四天四夜的秦腔。每到舉行廟會的時候,云臺山上下燈火輝煌,看戲的、焚香的、買貨的,各地游客與商販絡繹不絕,簡直熱鬧極了。此時,云臺山變成了當地群眾開展文化娛樂活動和進行商貿交流的重要場所。1989年,云臺山高家廟仰韶文化遺址被列入縣級文物保護單位,立碑建檔,加以保護。