下潘村：始祖潘杲宋徽宗皇帝御书“清潘”

女埠街道下潘村是一个集镇，原先为建设乡所在地。下潘行政村由原来的下潘行政村和下舒行政村两村合并组成。下辖下潘、花园、鱼池、张门、下潘桥头、馒头山和下舒7个自然村组成。全村以水田为主，村民大多从事食品加工和种植水稻、棉花为业，其中下潘索面为其特产。

下潘自然村，村民委员会驻地。世居潘姓，据《古溪潘氏宗谱》载，潘姓为吴越国婺州望族，其中一支为“清潘”，其祖于宋皇祐二年（1050）自婺州迁居兰溪大堰口落户，原名上宅，因建村迟于古溪桥头潘姓，改称下潘。村中有永龄塔和石牌坊等古建筑。其中永龄塔2017年1月13日批准为浙江省第七批文物保护单位。下潘潘氏始祖为潘皓，字益白，后周广顺癸丑年（935年）从河南荥阳先迁徙于浙江处州括苍，后由括苍迁居婺州。始迁祖为潘宗礼，宋大观己丑年（1109年），由兰溪桃花坞迁居本县大堰口中王山（今女埠下潘）。宗族堂名为：大公堂。

下潘村名人辈出。潘杲与潘慈明是本村的杰出代表。

潘杲（1088～？），字雉鸣，兰溪女埠下潘村人。大观三年（1109）进士。历官光禄寺大卿。宣和初方腊起兵入兰，邑姓唐氏、胡氏纠兵捍卫乡井。方腊兵息，本地有人诬告二姓实同方腊为乱，廷议欲发兵屠戮。杲力为之辩，愿以百口担保，由是获免。二姓谢以金帛，一无所受。

潘慈明（1133～？），字伯龙，兰溪女埠下潘人，潘杲之子。绍兴二十一年（1151）进士。仕至秘书丞，荆湖南路转运使。先是知江州，创建周濂溪先生祠堂，朱熹为之作记。殁时遗教子孙，以古礼送终，乡人传以为法。其文词、议论亦卓然可记。徐畸、吴师道称其为吾乡名士。