柳山書(shū)院建于半山開(kāi)闊之地，這里田地平展，水港橫斜；周?chē)厣江h(huán)繞，層峰疊翠，側連寺院。書(shū)院為磚木結構，外體長(cháng)方形，長(cháng)約三百八十九米，寬約九十八米。總建筑面積三萬(wàn)八千平方米。四面的墻皆為青磚平砌，前后重屋頂民房式，風(fēng)火墻內，蓋瓦從不同方位向內傾斜。書(shū)院內進(jìn)五重，由外而里，依次為教學(xué)區、藏書(shū)區、教師宿舍、學(xué)生宿舍、生活區等。按當地百姓的說(shuō)法，書(shū)院應該分為三大廳，前廳順山墻起列分上下二層，樓下每邊置廂房八間。由前廳過(guò)大天井，登兩旁臺階，進(jìn)入中廳。中廳檐高十點(diǎn)二米。從中廳過(guò)兩側之小天井到后廳，后廳為供孔圣人所在，也稱(chēng)為神堂。“文革”時(shí)期，柳山書(shū)院改作國家糧庫。一九七三年糧庫拆遷后書(shū)院被毀。