在使用 Apache Sqoop 进行数据导入时，防止重复数据导入的方法有哪些？请说明可用的增量导入策略及其适用场景。

回答思路

1. 【回答框架 1】Sqoop 避免重复导入的核心是控制导入边界与记录状态。基础手段包括使用主键或唯一键作为切分列，配合增量导入参数实现只拉取新增或变更数据。
2. 【回答框架 2】增量导入策略主要有两种：append 模式基于递增列（如自增 id）导入大于上次最大值的记录；lastmodified 模式基于时间戳列，导入更新或新增的记录，需配合 --check-column、--incremental 和 --last-value 参数。
3. 【回答框架 3】对于删除或更新场景，lastmodified 模式可能重复导入未变更数据，需结合目标表合并逻辑（如 upsert）或使用 Sqoop 的 --merge-key 进行合并，避免主键冲突。
4. 【回答框架 4】更稳妥的方案是使用 Sqoop 的 --incremental 与 --last-value 结合外部记录（如元数据表）维护上次导入位置，或改用数据湖工具（如 Spark、Flink）实现精确一次语义。
5. 【回答框架 5】实际项目中需根据数据源特性选择策略：append 适合只追加的日志表，lastmodified 适合有更新时间戳的业务表，并定期清理或归档历史数据。
6. 【关键点 1】append 模式依赖递增列，lastmodified 模式依赖时间戳列，二者均需指定 --check-column 和 --last-value。
7. 【关键点 2】--merge-key 可合并目标表已有记录，减少主键冲突，但无法处理删除操作。
8. 【关键点 3】增量导入不保证幂等，需结合目标表唯一约束或合并逻辑实现去重。
9. 【易错点 1】lastmodified 模式可能重复导入时间戳未变化的记录，导致数据冗余。
10. 【易错点 2】仅依赖 --last-value 在并发或数据回填时可能丢失或重复数据，需配合事务或外部状态管理。
11. 【易错点 3】Sqoop 增量导入不支持删除同步，删除操作需额外处理。