是否有一种方法来检查文件是否已被自动加载器处理?

Question

我每两天将文件上传到数据砖文件系统，我想知道是否有一个地方或日志来查看是否处理了一些文件?

感谢

Answer 1

请参考此链接:https://docs.databricks.com/ingestion/auto-loader/production.html#querying-files-discovered-by-auto-loader

从Databricks自动加载器 获取加载文件列表示例代码SELECT * FROM cloud_files_state('path/to/checkpoint');