崇林世居依山而建，前低後高，***由五大部分組成：第壹部分為池塘，面積約9畝，半月形；第二部分為禾場，面積1536平方米；第三部分為首圍；第四部分為以祠堂為中心的保鬥部分；第五部分為有望樓的後圍。三、四、五部分是圍屋的主體。正面開3個大門，門框均是花崗巖石。四周圍墻高9米，下半部分為灰沙墻，上部為磚砌墻，厚80厘米，圍墻內上部設有“走馬道”連接四個角樓以作防禦、聯絡之用。角樓與“走馬道”均設有射擊孔。在當時，這種高墻圍屋的防禦能力是很強的，這也是客家人長期聚族而居，防範外人欺侮、侵犯所形成的壹種特殊的居住形式。
內圍屋呈方形，由3層回型建築群和壹座3進式祠堂組合而成，最外圍中間部分有壹座高15米重檐歇山式的3層望樓，站在樓頂可眺望整座圍層。除了祠堂、門樓、角樓外，圍屋由眾多的生活單元組成，內有住房262間，9廳18井，其規模之大，氣勢之宏偉，令人嘆為觀止。