数据工厂 Blob 源 - 列标题有意义



我有一堆 csv 文件加载到 Azure blob 存储中,具有以下结构:

文件1

日期, T1传感器FG1,

T1传感器FG2, T1传感器FG3

16-1-1、200、300、400

文件2

日期, T2传感器FG1, T2传感器

FG2, T2传感器FG3

16-1-1、300,250、345

因此,本质上,两组传感器(T1和T2)在一个时间点发出三个读数。

我需要读取这些数据并将列标题应用于行,以便在后续处理之前知道每个读数来自哪个银行。

理想情况下,管道的结果应该是这样的:

银行, 日期, FG1, FG2, FG3

T1, 1/

1/16, 200, 300, 400

T2, 1/

1/16, 300, 250, 345

如果这更容易,我会对枢轴结果同样满意:

银行, 日期, 传感器, 值

T1, 1/

1/16, FG1, 200

T1, 1/

1/16, FG2, 300

T1, 1/

1/16, FG3, 400

我想不通,也不敢相信这是不可能的。

Azure Blob 是源。 目标/接收器可以是 blob 和/或 Azure SQL DB

请有人为我提供一些解决此问题的指示。

非常感谢

史蒂夫

可以使用自定义复制活动添加自己的转换/处理逻辑,并在管道中使用该活动。

相关内容

  • 没有找到相关文章

最新更新