apache storm在集群中自己做资源管理工作吗?



我是Apache Storm的新手,经过一些搜索和阅读教程后,我没有得到容错负载平衡和其他资源管理器职责是如何在Storm集群中发生的?它应该配置在YARN之上还是它自己完成资源管理工作?它是否有HDFS部分,或者应该先在集群中配置一个现有的HDFS ?

Storm可以自己管理它的资源或者可以运行在YARN之上。如果你有一个共享的集群(即与其他系统,如Hadoop, Spark或Flink运行),使用YARN应该是更好的选择,以避免资源冲突。

关于HDFS: Storm独立于HDFS。如果你想在HDFS上运行,你需要自己设置HDFS。此外,Storm还提供了Spouts/Bolt来访问HDFS: https://storm.apache.org/documentation/storm-hdfs.html

相关内容

最新更新