当你在Hadoop上时,你可以让YARN管理Hadoop作业、资源等。
亚马逊雪花的等效形式是什么?
Hadoop (HDFS) 是 YARN因为雪花是
这里有一个有趣的问题。Snowflake是一种部署在AWS和Azure上的数据仓库SaaS产品,我不会将其归类为"亚马逊的雪花"。
Snowflake 没有单独的工具来管理数据仓库群集的资源。它内置于其 3 层架构中。此链接将提供有关此的一些详细信息:https://www.snowflake.com/product/architecture/
由于 Snowflake 是云原生数据仓库,因此云的固有弹性确实使管理员能够动态扩展垂直和水平计算资源,以解决排队和并行等问题。
希望这有帮助。
你应该阅读发表在SIGMOD 2016上的技术论文Snowflake team。
它非常详细地描述了体系结构。