早在寒渊跟秦齐达成协议之后，便将玄衣卫的家人开始做分拆，妇孺老人已经陆续迁移到了寒家势力下的偏僻渔村，只等船一到，便可以接了人走。另外一些有能力的则是留在了那些作为赡养费的茶庄织坊田庄里。而玄衣卫，也有部分人留了下来，一是维护寒家的那些产业继续跑海船，另外也有其他用途。