Azure数据工厂:重复数据删除数组

Question

我有一个Azure数据工厂管道，以一个数组作为参数，可能有重复的(简单字符串)值。

我如何从数组中删除重复而不使用自定义活动?

Answer 1

我定义了一个类型为array的变量，并对参数本身应用了一个联合。这将删除重复的值。

Like@union(pipeline().parameters.FilePaths,pipeline().parameters.FilePaths)。