如果我想在本地hadoop集群上使用distCp，这样它就可以将数据"推送"到外部云存储，为了利用这个工具，必须考虑哪些防火墙因素?实际的数据传输发生在哪些端口上?是通过SSH和/或端口8020吗?我需要确保为源到目标提供网络连接，但赋予它的特权最少。(例如,只有打开端口是绝对需要)
我不相信SSH被用于实际的数据传输，除了您实际登录到集群并启动命令，例如。
至少，它是用于namenode和datanode的RPC数据传输端口，所以无论您为fs.defaultFS,dfs.namenode.rpc-address和dfs.datanode.address配置了什么