為了防止守軍逃竄，清軍將縣衙團團包圍了起來，而負責指揮的軍官則率領其中的主力部隊繞過照壁和旌善、申明二亭，試圖自大門處攻破縣衙。

清軍兵力雄厚，在發現縣衙大門緊閉，且明軍沒有主動從高牆背後射箭的情況，便搬來了打造的梯子試圖翻牆殺入縣衙內部。奈何明軍在縣衙裡集中了原本守衛西門外軍營的部隊以及部分義勇，梯子在牆邊再明顯不過，只要清軍一露頭，勢必會遭到明軍弓箭手的狙殺。

翻牆不成，清軍便乾脆調來了一門小型火炮，準備轟開縣衙的大門。縣衙的大門很是厚重，但是在火炮面前也如同紙一般被炮彈轟出了一個大洞，只是由於這門火炮實在不大，所以沒有成功將門閂震碎，清軍在重新裝填後便繼續射擊。

第二炮過後，大門已經徹底洞開，大隊的清軍自正門湧入，可是等他們進入縣衙的大門後才發現，不只是門後的大院，就連縣衙的大堂也空無一人，地面上除了被扔得到處都是的銀子、銅錢外，更多的則是雜亂的堆放著大量的已經潑灑過油料的布匹、木料、柴薪、紙張之類的引火之物。

明軍的意圖很明顯，可是未帶那些急於拾取銀錢的清軍做出反應，不知道從什麼角落的地方射出了大量的火箭，將這些引火之物引燃，甚至有的更是直接射在了清軍的身上。

縣衙的烈焰突起，迅速將縣衙的前半部分徹底點燃，進而開始向內部的各處蔓延開來。攻入縣衙的清軍慌不擇路的向來時的正門方向逃去，奈何堆放的雜物過多，幾乎每一瞬間都有清軍被烈焰點燃身上的甲冑、軍服，化作人形的火焰。身上的衣物被點燃的清軍在掙脫衣物的過程中造成了更大的混亂，以至於更多的清軍早逃亡的路上被烈焰焚身。而此時，明軍的火箭卻始終在進行射擊。

比起清軍，明軍對於縣衙內部佈置可謂瞭如指掌，他們在暗處射出的冷箭不僅點燃了引火之物，也在不斷的殺傷著沖入縣衙的清軍。只是縣衙的火勢一起便很難被撲滅，明軍也只得趕在火勢蔓延開來之前有組織的從那幾個側門中衝出，潛入縣城的街巷之中。

縣衙火光沖天，攻入其間的百餘清軍能夠活著逃出來的不過數十人，其餘的盡皆在那一片混亂之中殞身火海。

帶隊的那個遊擊莫名其妙的看著這一切，按道理守軍會以縣衙作為最後的防禦要地，會不惜一切代價的守住此地，可是誰知道明軍竟然會這樣做。是絕望中的無奈之舉，還是其中另有陰謀，那遊擊一時之間並不清楚，可是等守在側門被殺散的清軍逃回來後，他才明白這其中的問題所在。

清軍按照常理去估算明軍的防守方式，可是明軍卻根本不在乎這座一般來說最為重要的縣衙。眼見著明軍準備將全部的力量投入到巷戰之中，清軍只得在請示過主帥後分兵去鎮壓潛伏在縣城各處施以暗箭的明軍和義勇。

每當遭到明軍暗箭的射擊，清軍便迅速的集結兵力沖入那些小巷和宅院之中，可是比起清軍，如同縣衙那般，守城明軍和義勇大多是本地人士，對縣城的瞭解即便是義烏縣鄉下的百姓都無法與之比擬，更何況是常年駐守杭州遠道而來的撫標營了。

利用地形更為瞭解的優勢，明軍屢屢將清軍引入到小巷之中，隨即憑藉著鴛鴦陣在狹窄地形中小規模戰鬥的優勢不斷的吃掉小股清軍，與撫標營爭奪義烏縣城的控制權。

可是由於義烏縣城本就不是很大，雙方的兵力又相差良多，明軍付出的傷亡雖然更少一些，但是長時間的消耗也完全吃不消。照這個速度下去，大規模的襲擊能夠撐到入夜時分便是極限了，若是援軍還沒有抵達，這些守軍和義勇中大絕大多數人可能再看不到明天的太陽了。

明軍在縣城的各處還在做著殊死抵抗，而清軍的撫標營則在竭盡全力的將這些抵抗鎮壓下去，為配合督標營以及金