
从一份表格开始
导入数据,确认规则,检查结果,再导出新副本。
把表格放在这里
拖放 CSV、TSV 或分隔文本文件
UTF-8 · 每份最多 10 MB从现有数据开始
合成示例库 商品表 · 供应商文件 · 系统导入
需要更详细的规则、示例与边界说明?展开完整说明
去重之前,先说明什么算同一条
CSV 去重有两种不同判断:整行所有字段完全相同,或者一个或多个指定字段相同。重复商品编号但价格不同的两条记录,并不是整行重复。先确认文件解析,再选择判断字段;不要因为名称相似就把两个对象认定为同一个人或商品。
选择多个字段时,工作台把它们作为独立的复合键组件处理,不用容易碰撞的简单字符串拼接。默认严格比较原始文本,001 和 1 不同,空格和大小写也有意义。忽略大小写与去两端空格需要主动开启,它们只改变判重依据,不改写保留记录里的原始内容。
第一条、最后一条与只标记
保留第一条和保留最后一条都指文件中的顺序,不代表最早或最新业务记录。若数据没有可信的排序依据,先用“只标记,不删除”,检查分组内的字段冲突,再决定规则。工作台不会随机挑选一条,也不会把姓名、价格或电话从不同记录中拼成一个未经确认的“正确结果”。
按指定字段判重时,空匹配字段进入待检查报告并保留,不会把所有没有编号的记录当作同一个对象删掉。整行判重则检查完整值组合,包括重复的全空记录。不同模式对空记录的含义不同,需要查看界面设置。
用商品编号检查冲突
假设 001 在文件开头和后面各出现一次,价格分别为 12.00 与 12.50,另外有一个 002 和两条空编号记录。按 SKU 保留第一条,会形成一个重复组,涉及两条记录,实际移除一条;002 与两条空编号记录都保留。选择保留最后一条,则保留文件中后出现的 12.50,而不是因为它被认定为“最新价格”。
重复分组报告包含完整记录、保留或移除决定及来源位置。重复组数、涉及记录数和移除数不能混为一个指标。一个有四条记录的组,保留一条会移除三条;只标记时移除数为零。导出可以分别选择保留结果、全部重复分组、移除记录和空键待检查报告。
和合并、比较连续使用
多文件上下合并后,先检查来源与重复键,再把接受的去重结果应用到工作流。文件比较要求确定的唯一键,这时可以直接继续使用同一份数据。切换工具无需重新上传,撤销会从保留的输入和步骤重算,而不是覆盖原文件。
常见问题
按一列去重,怎么保留整行的其他信息?
把这列选为去重依据,先看重复分组和其他字段的冲突,再选择保留策略。保留的是整条记录。最后一条指当前顺序中的最后一条,不会自动理解为日期最新的一条。
可以按日期自动保留最新记录吗?
当前没有这样的日期语义。必须先定义日期字段、解析格式、无效日期与同一时间的处理方式才能可靠实现。现在的“最后一条”只代表文件顺序。
为什么两条空编号没有被删除?
没有编号不能证明两条记录属于同一对象。按键去重默认将它们留在待检查报告。请修复编号或选择其他完整的匹配字段。
忽略空格后,导出的内容也会被去空格吗?
不会。该选项只影响判重依据。要实际改写单元格,请在清洗工具中明确选择对应字段和规则,并检查变化报告。
准备好整理这份数据了吗?
直接开始,先用示例了解流程,再处理你的文件。

