我正在尝试在 Amazon EC2 上设置 Hadoop 集群。我能够格式化名称节点。"jps"命令的输出在命名节点中如下：
5826 名称节点6312 工作追踪器6192 辅助名称节点8266 日元
在从节点中：
5452 数据节点5699 日元5609任务跟踪器
所以，我假设Hadoop正在运行。当我尝试使用命令将数据从本地目录复制到 HDFS 时
Hadoop FS -mkdir/user/ubuntu/clusters
hadoop fs -copyFromLocal clusters/user/ubuntu/clusters
我收到数据复制警告和其他错误。日志如下
18-11-14 18：41：12 警告HDFS。DFSClient： DataStreamer Exception： org.apache.hadoop.ipc.RemoteException： java.io.IOException： File/user/ubuntu/clusters/clusters 只能复制到 0 个节点，而不是 1 个节点 at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.getAdditionalBlock（FSNamesystem.java：1920） at org.apache.hadoop.hdfs.server.namenode.NameNode.addBlock（NameNode.java：783） at sun.reflect.GeneratedMethodAccessor6.invoke（Unknown Source） at sun.reflect.DelegatingMethodAccessorImpl.invoke（DelegatingMethodAccessorImpl.java：43） at java.lang.reflect.Method.invoke（Method.java：606） at org.apache.hadoop.ipc.RPC$Server.call（RPC.java：587） at org.apache.hadoop.ipc.Server$Handler$1.run（Server.java：1432） at org.apache.hadoop.ipc.Server$Handler$1.run（Server.java：1428） at java.security.AccessController.doPrivileged（Native Method） at javax.security.auth.Subject.doAs（Subject.java：415） at org.apache.hadoop.security.UserGroupInformation.doAs（UserGroupInformation.java：1190） at org.apache.hadoop.ipc.Server$Handler.run（Server.java：1426）
at org.apache.hadoop.ipc.Client.call(Client.java:1113)
at org.apache.hadoop.ipc.RPC$Invoker.invoke(RPC.java:229)
at com.sun.proxy.$Proxy1.addBlock(Unknown Source)
at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
at java.lang.reflect.Method.invoke(Method.java:606)
at org.apache.hadoop.io.retry.RetryInvocationHandler.invokeMethod(RetryInvocationHandler.java:85)
at org.apache.hadoop.io.retry.RetryInvocationHandler.invoke(RetryInvocationHandler.java:62)
at com.sun.proxy.$Proxy1.addBlock(Unknown Source)
at org.apache.hadoop.hdfs.DFSClient$DFSOutputStream.locateFollowingBlock(DFSClient.java:3720)
at org.apache.hadoop.hdfs.DFSClient$DFSOutputStream.nextBlockOutputStream(DFSClient.java:3580)
at org.apache.hadoop.hdfs.DFSClient$DFSOutputStream.access$2600(DFSClient.java:2783)
at org.apache.hadoop.hdfs.DFSClient$DFSOutputStream$DataStreamer.run(DFSClient.java:3023)
18-11-14 18：41：12 警告HDFS。DFSClient： 错误恢复空错误数据节点[0] 节点 == 空18-11-14 18：41：12 警告HDFS。DFSClient：无法获取块位置。源文件 "/user/ubuntu/clusters/clusters" - 正在中止...copyFromLocal： java.io.IOException： File/user/ubuntu/clusters/clusters 只能复制到 0 个节点，而不是 1 个节点14/11/18 18：41：12 错误 hdfs。DFSClient：无法关闭文件/user/ubuntu/clusters/clustersorg.apache.hadoop.ipc.RemoteException： java.io.IOException： File/user/ubuntu/clusters/clusters 只能复制到 0 个节点，而不是 1 个节点 at org.apache.hadoop.hdfs.server.namenode.FSNamesystem.getAdditionalBlock（FSNamesystem.java：1920） at org.apache.hadoop.hdfs.server.namenode.NameNode.addBlock（NameNode.java：783） at sun.reflect.GeneratedMethodAccessor6.invoke（Unknown Source） at sun.reflect.DelegatingMethodAccessorImpl.invoke（DelegatingMethodAccessorImpl.java：43） at java.lang.reflect.Method.invoke（Method.java：606） at org.apache.hadoop.ipc.RPC$Server.call（RPC.java：587） at org.apache.hadoop.ipc.Server$Handler$1.run（Server.java：1432） at org.apache.hadoop.ipc.Server$Handler$1.run（Server.java：1428） at java.security.AccessController.doPrivileged（Native Method） at javax.security.auth.Subject.doAs（Subject.java：415） at org.apache.hadoop.security.UserGroupInformation.doAs（UserGroupInformation.java：1190） at org.apache.hadoop.ipc.Server$Handler.run（Server.java：1426）
at org.apache.hadoop.ipc.Client.call(Client.java:1113)
at org.apache.hadoop.ipc.RPC$Invoker.invoke(RPC.java:229)
at com.sun.proxy.$Proxy1.addBlock(Unknown Source)
at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
at java.lang.reflect.Method.invoke(Method.java:606)
at org.apache.hadoop.io.retry.RetryInvocationHandler.invokeMethod(RetryInvocationHandler.java:85)
at org.apache.hadoop.io.retry.RetryInvocationHandler.invoke(RetryInvocationHandler.java:62)
at com.sun.proxy.$Proxy1.addBlock(Unknown Source)
at org.apache.hadoop.hdfs.DFSClient$DFSOutputStream.locateFollowingBlock(DFSClient.java:3720)
at org.apache.hadoop.hdfs.DFSClient$DFSOutputStream.nextBlockOutputStream(DFSClient.java:3580)
at org.apache.hadoop.hdfs.DFSClient$DFSOutputStream.access$2600(DFSClient.java:2783)
at org.apache.hadoop.hdfs.DFSClient$DFSOutputStream$DataStreamer.run(DFSClient.java:3023)
任何帮助将不胜感激。谢谢。
在 Amazon EC2 中创建多节点集群的最佳分步指南之一在这里
它解释了每一步。您似乎已经完成了第一部分，请完成对您有所帮助的第二部分。
希望对您有所帮助..