繁昌县辖繁阳（由原城关镇大部、新港镇部分地区和横山、马坝两乡合并而成）、新港（由原新港镇新港居委会，新东、克里、荷圩、克山4个村委会，高安乡高安居委会和高安、草山、矶山、白象、裕民、义合、泥埠7个村委会合并而成）、荻港（含原芦南乡）、孙村（含原黄浒镇和赤沙乡）、平铺（含原新林乡）5镇和峨山乡，面积604平方公里，2005年人口31.61万。方言有：
(1)繁昌话 属吴语宣州片铜泾小片。分布在城关和圩区。
(2)铜陵腔 属江淮官话洪巢片芜湖小片。分布在靠近铜陵的荻港、黄浒、赤沙等乡镇一带。
(3)湖北话 分布在平铺、新林等乡镇。