Hadoop是否记录向集群发出的任何'hdfs dfs'命令？

Question

我想知道在某个日志文件中是否保存了向集群发出的'hdfs-dfs'命令的任何记录。我们需要一个审计功能，并想知道它的某些方面是否已经内置。谢谢

Answer 1

您正在寻找的是所谓的数据治理。这方面有几个提供商，如Apache Ranger、Cloudera Navigator。两者都通过摄取Hadoop日志来跟踪活动。