我什么时候对etl使用粘合作业或Sagemaker处理作业



我目前正在努力决定在哪些情况下,胶粘作业比sagemaker加工作业更可取,反之亦然?如果能就这个问题提出一些建议,我们将不胜感激。

我可以在两者上都做同样的事情,那么我为什么要为区别而烦恼呢?

  • 如果要使用特定的EC2实例,请使用SageMaker
  • 定价:SageMaker每秒按比例计费,而Glue的充电量最低(1分钟或10分钟,具体取决于版本(。您应该衡量在每个平台上工作量的成本
  • 自定义:在SageMaker Processing中,您可以自定义执行环境,因为您提供了Docker映像(您可以运行不止Spark/Python,如C++或R(

最新更新