传说早在唐宪宗元和年间,乌镇有个英勇的将军,姓乌名赞,人称乌将军。乌将军爱国爱民,武艺高强,英勇善战。唐代自安史之乱以后,中央实力渐弱,地方官吏飞扬跋扈,纷纷割据称王。当时,浙江刺史李琦也要称霸,举兵叛乱,致使这一带兵荒马乱,百姓无法生活。唐宪宗就命乌赞将军同副将吴起,率兵讨伐。乌赞武艺高强,英勇善战,打得叛军节节败退,乌将军乘胜追击,当官兵追赶到乌镇的车溪河畔时,李琦突然挂出免死战牌,要求休战,乌将军就原地扎营,待机再战。当天深夜,叛军偷袭营地,乌将军匆忙迎战,李琦佯退至车溪河边,从一座石桥上飞快逃过,乌将军追过桥时一阵乱箭飞来,将乌将军及他的青龙驹射倒。原来是李琦在桥堍下设下陷阱,暗害了乌将军。吴起率兵赶到,杀退了叛军,把乌将军埋葬在乌镇车溪河西,为他堆坟立碑。当天夜里,人们看到乌将军的坟上冒出一株绿叶银杏,并很快就长成参天大树。当地百姓都说,这银杏就是乌将军的化身。
由于平定了李琦的叛乱,百姓免遭战乱之苦。人们为了纪念这位爱国护民的将军,在镇上建造了一座乌将军庙,并在庙中悬挂一块匾额,上面写着“大树属将军”五个字。乌将军也从此成为保佑当地百姓的地方神。
现在在西栅街区庙西街东,已经修复重建了乌将军庙。将军庙占地3600平方米,分前后殿,两侧有耳房偏殿,园中有假山清池。正殿正中供奉的就是家喻户晓的乌将军,身后是将军的书童,而两边则分别是火神和水神。
而那棵被视作乌将军化身的古银杏树,如今已高达21.1米,周长5.3米,要三人手拉手才能合抱。它依旧苍翠挺拔,静静矗立在市河西岸,守护着一方水土。古人有诗云:“从祠日暮鸦呼群,访古人说乌将军。将军遗迹不可见,一棵大树撑青云。”