Sqoop用3条记录将Oracle导入HDFS可以.完整表失败

Question

我通过Sqoop将数据从Oracle导入HDFS，有3条记录。使用此命令可以：

./sqoop-import --connect <oracle-jdbc-string> --username <my-user-name> --password <my-password> --table SYS_GROUP --where "Sys_Group_ID < 4"

作业成功完成，共有3条记录。

但当我想导入完整的表时，它失败了。命令：

./sqoop-import --connect jdbc:oracle:thin:@10.58.71.164:1521:dbmss01 --username <my-user-name> --password <my-password> --table SYS_GROUP --fetch-size 100

日志：

15/12/04 02:32:19 INFO mapreduce.Job: Job job_1448967962138_0005 failed with state FAILED due to: Task failed task_1448967962138_0005_m_000003<br><br>
Job failed as tasks failed. failedMaps:1 failedReduces:0
15/12/04 02:32:19 INFO mapreduce.ImportJobBase: Transferred 378.3994 KB in 96.9962 seconds (3.9012 KB/sec)<br><br>
15/12/04 02:32:19 INFO mapreduce.ImportJobBase: Retrieved 1474 records.<br><br>
15/12/04 02:32:19 ERROR tool.ImportTool: Error during import: Import job failed!

Answer 1

尝试通过在末尾添加--m 5来增加映射器的数量

Answer 2

您查看的日志错误，需要查看映射任务日志。转到资源管理器web UI，导航到地图减少作业，单击失败的地图任务，查看问题所在。