雪花云数据平台雪管自动摄取

Question

我是雪花的新手。我已经创建了雪管，阶段还在AWS中配置了SQS。

当我将文件放入 S3 存储桶时，数据未通过 snowpipe 加载到表中。

如果我正在执行语句：更改管道snow_pipename刷新，则只有数据加载到表中。

我是否需要为自动摄取数据加载执行更多设置/说明。

Answer 1

SQS 通知可能未在 S3 存储桶上正确设置。在下面的链接中检查配置以进行设置

https://docs.snowflake.com/en/user-guide/data-load-snowpipe-auto-s3.html#step-4-configure-event-notifications

Answer 2

确保您已使用适当的策略和信任关系正确配置了雪花 IAM 角色。

文档的第 5 步： https://docs.snowflake.com/en/user-guide/data-load-snowpipe-auto-s3.html#step-4-configure-event-notifications

此外，请确保这些值反映在阶段内的STAGE_CREDENTIALS中，使用DESCRIBE STAGE snowpipe_emp;