1.功能概述

“去除重复项”会删除指定列中具有重复值的行，并按照指定顺序保留该行的第一个实例。用户还可以设置排序标准来检查重复项，并指定执行命令后要保留的行。

2.添加“去除重复项”节点

2.1添加节点

通过拖拽，将左侧面板中的“去除重复项”节点拖拽至画布区域。

2.2与前置节点建立关联关系

通过连线，与前置节点建立关系。

3.配置节点

3.1重命名节点名称

点击节点名称右侧的编辑按钮，可以重命名该节点。

3.2选择需要检查重复项目的列

展开下拉列表，选择需要检查重复项目的列，可多选。

选择完成之后，勾选是否在检查重复项时需要区分大小写。

3.3设置去重时的排序规则。

由于在去重时，会保留第一行记录，其他的项目会被移除掉，如有需要，用户可通过“设置去重时的排序条件”来排序。

用户选择排序条件并指定排序规则，去重时，会保留排序结果的第一项，并把数据移除。

type=info

注意：

若不指定排序规则，则保留默认顺序的第一行数据。

4.预览数据

切换到“数据”页签，可查看去重结果。