我有一堆 csv 文件加载到 Azure blob 存储中,具有以下结构:
文件1
日期, T1传感器FG1,T1传感器FG2, T1传感器FG3
16-1-1、200、300、400
文件2
日期, T2传感器FG1, T2传感器FG2, T2传感器FG3
16-1-1、300,250、345
因此,本质上,两组传感器(T1和T2)在一个时间点发出三个读数。
我需要读取这些数据并将列标题应用于行,以便在后续处理之前知道每个读数来自哪个银行。
理想情况下,管道的结果应该是这样的:
银行, 日期, FG1, FG2, FG3
T1, 1/1/16, 200, 300, 400
T2, 1/1/16, 300, 250, 345
如果这更容易,我会对枢轴结果同样满意:
银行, 日期, 传感器, 值
T1, 1/1/16, FG1, 200
T1, 1/1/16, FG2, 300
T1, 1/1/16, FG3, 400
等
我想不通,也不敢相信这是不可能的。
Azure Blob 是源。 目标/接收器可以是 blob 和/或 Azure SQL DB
请有人为我提供一些解决此问题的指示。
非常感谢
史蒂夫
可以使用自定义复制活动添加自己的转换/处理逻辑,并在管道中使用该活动。