Kedro指向一个以前使用过的Azure数据湖



我正在尝试读取/写入另一个ADLS Gen2存储帐户。到目前为止,它与一个旧的完美配合。

我用新的帐户名和密钥更新了credentials.yml,但我的目录似乎总是指向我的旧存储帐户,如下面kedro run命令输出的摘录所示:

2021-12-06 15:23:21,735 - azure.core.pipeline.policies.http_logging_policy - INFO - Request URL: 'https://<old_storage_account_name>.blob.core.windows.net....

关于如何在没有此类问题的情况下更改来源/目的地,有什么帮助吗?

提前谢谢。

您发布的内容有点难以支持。实际上,Kedro只是读取运行时可用的YAML文件中的内容。所以我有几个理论:

  1. 您是否可能指向代码库的旧版本
  2. 您的代码库中是否有多个可能优先的credentials.yml文件

是的,我同意,如果你能添加一些执行片段,那就太好了。但鉴于此,我想还有一件事需要注意,如果你在Jupyter上使用Kedro,它不会检测到更改,除非重新启动你的笔记本或您的一个单元格上有以下片段:

%load_ext autoreload

%autoreload 2

相关内容

  • 没有找到相关文章