为了打消王直的怀疑，胡宗宪下令立即从舟山撤防。并通过传讯人邀请王直上岸，到杭州府衙一聚，共商招安开市大事。至于王直通过传讯人所提的“释放人质”，则是闭口不谈。
王直虽然傻，但心中毕竟起了怀疑，决定率领解放军返回日本。怎料王滶死活不肯，并且主动代替王直，赶赴杭州城内，与胡宗宪会面。
此番过来大明的战士，多是王滶亲信。听了王滶所言，不仅不走，而且跟着明军的后脚，上了舟山岛。将船停泊在岛西的岑港，人则就着岛上本就有的各类设施，直接住下来。
话说，明军刚走，连灶头都还是热的。走的毕竟急了些，有些用品都拉下了。战士们捡了现成便宜，抢来占去，乐此不疲。无奈王直如今声威日下，竟然令行不止。除了后悔认了个白眼狼做干儿子，还能咋样。
既然已经无法回头，只能等王滶的消息。王滶回来时，带了胡宗宪的身边亲信——指挥使夏正来见王直，一道邀请王直去杭州。王直虽然心里暗骂，怎么不将他那个老母，也就是自己的干夫人救回，反倒捎个不相干的人。
但又想到，胡宗宪肯派个身边的人过来，也算是有点诚意。耐不住王滶的软磨硬泡，加上一时间气过头了，兼考虑到“改革开放”的重要性，决定铤而走险，赌上一把。将夏正扣下做人质后，经船上岸，只身一人，与前来迎接的明军将士，一道进了杭州城。来到胡宗宪的府衙做客。