如何将数据从Snowflake SQL输出流式传输到AWS上的S3

Question

我有一个SQL要在AWS帐户上托管的三个Snowflake表上运行。我想使用Kafka或任何其他流媒体服务，将基于SQL输出的任何新记录流式传输到S3存储桶。我有什么选择来实现这一点？

Answer 1

您可以直接将数据卸载到S3存储桶中：

1. 创建存储集成
2. 直接在查询中创建stage或指定bucket url

从mytable storage_integration=s3_int复制到s3://mybucket/unload/；

参考编号：https://docs.snowflake.com/en/user-guide/data-unload-considerations.html