林缚这时候考虑到将这些浙兵降卒从津海秘密调到嵊泗诸岛，实际比从崇州征调民勇去加强嵊泗防要好，甚至可以从中挑选一些人出来派去浙东、浙西潜伏，一为在两浙收集情况方面，二为将来打两浙做准备。
待将刘直支开，林缚将这个想法与总哨官吴齐说了，要他负责其事。此时奢家在浙南的统治还很混乱，正是将这些两浙当地出身的浙兵降卒派回去潜伏的好时机。