漢高祖廟位于現鳳城賓館院內。最早建在中陽(yáng)坊，幾經(jīng)遷移，座落于文廟左側。中陽(yáng)坊高祖廟位于原縣治東北角，由五代時(shí)劉知遠修建，到唐代已開(kāi)始損壞，人跡罕至。唐高祖時(shí)的國子監博士徐礦過(guò)高祖廟時(shí)曾寫(xiě)下一詩(shī)：“魂魄定驚鐵馬馳，孤城遺廟閱今茲。月明劍佩來(lái)三杰，世遠君臣晦六奇。狐兔解圍階陛拜，金錢(qián)空費女郎祠。轟騰車(chē)馬郊衢去，吊古真堪揮淚洏
。”宋宣和年間（公元1119—1125年），高祖廟為時(shí)任豐知縣韓侯、主簿王之才重建。至元朝末年，廟宇荒蕪，墻垣傾圮。明初朱元璋詔命有司歲時(shí)享祭。明宣德元年（公元1426年）知縣闕膺加以修葺。正統八年（公元1443年）典史劉勉重修。弘治十二年至十三年（公元1499—1500年）知縣于讓、縣丞宋溥、典史查俊、教諭陳讓、訓導吳輒、鄭發(fā)重修。高祖廟正殿三間、東西廡房六間，前門(mén)樓三間，周?chē)鲇休^高院墻。
嘉靖五年（公元1526年）豐縣城被黃水淹沒(méi)，縣治遷于華山之陽(yáng)，高祖廟遷建于嵐山之陽(yáng)。嘉靖三十一年（公元1552年）縣治遷回舊址，將高祖廟改建于城北門(mén)外東側。嘉靖三十九年（公元1560年）縣令胡乂心加修。至明末，廟宇荒蕪，崇禎十二年順天府榜舉人史文奎過(guò)高祖廟寫(xiě)道：“漢帝威儀儼在茲，寒荒漠漠野煙馳。當時(shí)約法除民患，不獨興王見(jiàn)地奇。過(guò)吊紛來(lái)披野棘。咄嗟難辨起荒祠。空堂袞冕苔銷(xiāo)盡，啼鳥(niǎo)吟螀總涕洏”。清康熙十九年（公元1680年）知縣劉毓遴將高祖廟遷建于城北門(mén)內天津橋左側，并置田15畝作為廟宇修葺之用。康熙四十七年縣知事王初集加以重修，中間帝像飾以黃金，兩旁列四輔十八侯。雍正四年（公元1726年）縣令邵鐘銓復加修建。至清末，高皇廟時(shí)作私塾，時(shí)而駐軍。民國時(shí)而作學(xué)校，時(shí)而駐軍。上世紀五十年代，高祖廟被拆，擴建成縣政府招待所一部分。