不知出過多少進士、堂官，甚至還有閣臣，門生故吏遍佈天下，在朝為官的子弟也有不少。地方官上任，第一件事，就是要去這些世家遞帖子拜訪，有了這些世家幫襯，這官才能坐下去，否則趁早挪窩。
而且這江南與山東還不一樣，像山東四大家，被個王玄連同劉才就給壓制住，而江南世家的根腳就硬氣多了。明朝的文臣南方人多，北方人少，連考試都要分南北榜，朝內替江南說話的官員多了，南方自然就硬紮了起來。而這江南地面上，又數世家勢力最為龐大，與士人互相幫助，互為表裡。
紹興府從洪武年到現在，就出了將近500個進士，其中大半出自世家，越中名門子弟，入朝為官者遍佈兩京十三省，從科道言官到六部堂官，彼此互為奧援，勢力龐大，成化年的名臣謝遷、王華，都是越中世家出身，王畿、徐愛、錢德洪、朱節等王陽明的弟子門生，更是當世一等一的了得人物。而大明朝開國功臣劉伯溫，便是處州青田鄉人，如今依舊是浙江省內數的著的名門大戶；三輔呂夲的宗族，也在浙江，都是累世富貴，詩禮傳家，打死了人，只需要留個奴僕頂罪，便可高枕無憂的大牛。
這些商人身後都有後臺靠山，往往是京師裡的高官顯宦，又靠自己家族多年積累的人脈，便是朝中宰輔的府邸，一樣任由他們往來，其能量絕對不容小覷。他們不能平滅倭寇，更不能把東南經略好，但如果得罪了他們，被全力一拼報復，那麼破壞政略局面，卻是很可能的。胡宗憲儘管已經掌握了一些這幫豪商背後搗亂的證據，卻也不敢下手對付，生怕跟這些豪商的宗族結仇，自己到時便大為不妙。
徐文長知胡宗憲的心思，又道：“東翁顧忌，學生也知，此事更易辦理。只等到嚴鴻來了，就把這事交給他做，到時候來個新貴對世家，看看誰的手段高明。不論勝負如何，都與東翁不傷。”
胡宗憲微微一笑，又問道：“揚州那邊情形如何？可不要讓李氏兄弟逃之夭夭，到時候便不好交代。”
徐文長道：“東翁放心，也不知道那李文藻是犯了什麼病，或是聽了什麼狗頭軍師的屁話，一貫精明的人，居然和那蠢豬一般。出了這大事，不思遠遁，反而藏匿在揚州，這不是自投羅網麼？如今揚州城內外，都已經安排下我們的人馬，三公子親自坐鎮，另有錦衣衛中的精幹校尉，保證出不了閃失。我如今唯一擔心的是俞大猷那邊，這一戰，閩勇損失大，戰功微，怕是他心中有些怨氣。”
胡宗憲冷笑道：“他有怨氣又能如何？玩什麼單艦衝陣，倒是威風，若是損毀了欽差那艘寶船，讓我拿什麼賠償？若不是發現的早，他還要帶人馬打到舟山去，把汪直的直屬倭寇一網打盡呢。這老匹夫腦子裡除了打打打之外，還能不能放些別的東西？若不是看他有些微末功勞，我定要將他革職查辦！他的事，便不必說了。先生且退下。”
徐文長知道，胡宗憲與俞大猷素來積怨頗深。而俞大猷對倭寇主張嚴厲打擊，對胡宗憲的招撫之策頗不以為然，偏偏還把這不以為然的態度擺在檯面上，更是讓胡宗憲不滿。當初因為倭寇大兵壓境，用人之際，還要多多仰仗俞大猷，因此胡宗憲行事還要講點顧忌。如今大敵既去，俞大猷這等武將便不再