FlexRS类型在批处理或流处理的数据流部分中的位置



当我查看谷歌云平台的数据流时,我有一个关于FlexRS类型的问题。:(

据我所知,数据流支持批处理和流,但我很想知道有一种FlexRS类型。

简单地理解FlexRS在文档中很难识别,只是它比典型的工作流更便宜。

我可以请你解释一下FlexRS吗?

谢谢。

Dataflow是一个完全管理的批处理和流分析服务,通过自动缩放最大限度地减少延迟和处理时间。

关于数据流的FlexRS,您可以在非时间关键的批处理管道中使用它,例如可以在特定时间窗口内完成的每日或每周作业。通常,Dataflow同时使用可抢占的和常规的工作者来执行您的作业。它考虑了可抢占虚拟机的可用性,并根据文档向您收费。

另一方面,FlexRS为批处理的CPU和内存定价提供折扣。它可以在6小时内延迟Dataflow批处理作业,以根据资源的可用性确定启动作业的最佳时间点。启用时,FlexRS默认为工作池中90%的工作线程选择可抢占的虚拟机。

因此,FlexRS仅用于非时间关键型批处理工作负载。

最新更新