该围楼建于清朝道光十六年（公元1836年），竣工于咸丰十年（公元1860年），历时24年，为当地富豪乾荣所建。这城堡式的清代建筑物，既是聚居而息、几代共居的民宅，也是为了防御当时盗獗的盗贼兵匪。大围占地面积达13544.96平方米，是始兴也是广东最大的一处客家围楼，其建筑既有古代雄浑朴实的气势，又有近代精致高雅的韵味，集古代、近代客家建筑风格于一体。整座建筑分左、中、右三部分，从左至右全长约百多米，前后宽约50米。三部分的结构形式大体相同，只是中间部分稍大些（16.9米），以中间的围楼为主体。围内房屋沿围墙相对称地进行建筑，建筑物以楼房多、平房少，围楼内有栽花种树的大院4个、祠堂6个、议事厅17个、天井16个、水井4口，寝室、厨房、储粮室、杂物间、厕所、牲畜栏舍等房间770多个，可见其规模。整个大围呈长方“回”字形里外三层，是封闭式结构，外围低，内围高，大围开启一大门。围楼左、中、右三部分建筑物之间均建有防火巷，无论围内哪一部分房屋失火，火势较难殃及邻里。主体4层楼的墙体四周布满瞭望孔和射击孔，每层设有回形“走马巷”作巡逻用，楼上楼下的回廊过道上通下达，四通八达，利于巡逻放哨。整个大围楼用料十分考究，墙体的青砖经人工磨制，显得光滑规整，围楼大门、门框、窗框、台阶、廊沿、井台等以花岗石条砌成，显得坚实大方。