考察点:export 四阶段、staging table、-m 与事务批大小、常见失败原因。
要点:
--update-key)。失败常因:类型不匹配(Hive NULL 与 \N)、字段分隔符错位、长度超限、目标表锁等待。--staging-table:先写暂存表,全部 map 成功后单事务 INSERT ... SELECT 合并,失败可安全重跑;或目标表唯一键 + --update-mode allowinsert(upsert)。-m 并行受目标库连接数与锁限制;-Dmapreduce.map.java.opts 调内存;batch 与 --batch 开启 JDBC 批量;避开目标库高峰。--skip-distinct... 不,用容错参数前先修分隔符/类型;脏数据多时加校验列或预处理。题目与答案就在本页;收藏、批注和错题重练在应用内