NiFi:使用HDFS文件作为查找

Question

我需要在NiFi作业中使用HDFS文件作为查找。这个HDFS文件包含两个字段id、name和I，它们需要通过我的流传递IDS并从HDFS文件中检索name。我的HDFS文件在镶木地板快速格式。你能告诉我我可以通过查找处理器实现这一点吗？或者我应该采用不同的方法。

任何工作流示例都会非常有用。

提前感谢大家。

Kumar

Answer 1

HDFS作为一种查找可能非常低效，这可能是我们没有控制器服务的原因。您从哪里获得要进行查找的文件？也许相反，你可以用NiFi获得HDFS文件；反向查找"；您在哪里用您试图查找的字段来丰富HDFS文件？

话虽如此，NiFi确实有HBase查找服务，所以另一种选择是将HDFS文件放入HBase并以这种方式进行查找。