在这个过程中，其实就已经死了不少人，一些人是因为不适应海上航行，在船上病了，船上也没有大夫，生病了要么自己扛，扛不过去，只有被丢到海里喂鱼的下场。后来到了地方之后，也有水土不服的。岛上土地很贫瘠，他们当初过来也没有带什么种子，毕竟，谁家去求仙带凡人的粮种呢？而这边原产的粮食作物，虽说也经过当地土人驯养，但是很显然，这些土人根本不擅长种地，他们还处在刀耕火种的阶段，产量简直低得感人。
在这样的情况下，多有不适应这样生活的，很多人开始怀念秦国，秦法虽然严厉，但是好歹那里不会饿死人啊！而这岛上，什么都没有，土人一个个看起来不比猴子强到哪里去，偏偏徐福还让他们跟土人联姻，这不是开玩笑嘛！你让一个文明社会出来的人，在有选择的情况下，去跟原始食人部落的人成婚？是个人都要说他们疯了！
在这样的情况下，徐福手下发生了第一次的叛乱，这也是为什么肃慎人能在另外一个岛上发现秦人留下的物品的缘故，那些叛乱的人起事仓促，本身也没有多少武力，因此很快被镇压了下去，残存的人划着小船逃跑了，结果也没能活下来。
徐福虽说带着人跟那些土人融合了，但是这个融合并不顺利。这些土人就算是羡慕徐福他们的生活，但是羡慕归羡慕，徐福他们带来的东西许多对于他们来说华而不实，而