在 Azure 数据工厂复制活动中使用“附加列”时，如果源上已经存在该列，是不是会在接收端复制该列？

Posted 2023-02-19

【中文标题】在 Azure 数据工厂复制活动中使用“附加列”时，如果源上已经存在该列，是不是会在接收端复制该列？

【英文标题】：When using 'Additional columns' in Azure Data Factory's copy activity, will it duplicate the column on sink side if it exists on source already?在 Azure 数据工厂复制活动中使用“附加列”时，如果源上已经存在该列，是否会在接收端复制该列？

【发布时间】：2022-01-21 21:51:50

【问题描述】：

在复制 csv 文件时，我需要确保目标上存在某个列。此列可能存在也可能不存在于源文件中。如果我在复制活动中使用附加列部分，是否可以避免重复？

【参考方案1】：

复制活动中的附加列是添加附加数据列以与源数据一起复制到接收器。

这不会验证该列是否存在于接收器中。

附加列可以存储源文件路径，将现有的源列复制为另一列、静态值、变量、管道参数。

请参阅此MS document 以获取有关复制活动中“附加”列的更多详细信息。

您可以使用获取元数据活动从源数据集和接收器数据集中获取列名并进行比较。使用 If 条件结果，您可以在 True 和 False 活动中复制具有附加列和不具有附加列的结构。

参考这个类似的SO 链接。