按字段补全,而不是简单丢掉重复行
合并重复记录中的有效字段解决同一实体多条记录各自保存部分信息的问题。一条有电话、另一条有地址,可以逐字段补全,而普通去重保留某一整行可能丢失另一行的有效字段。每个结果字段有保留理由和来源追踪。
分组必须使用明确精确键。相似姓名不能自动当成同一人;若使用模糊匹配的前置结果,必须先人工接受关系,再使用已确认实体键。实体关系确认与字段保留决定是两个步骤,不能混为自动覆盖授权。
精确键与空键处理
导入 CSV/TSV 或粘贴表格并确认解析,选择一个或多个“精确实体键”。同一编号只在某个组织内唯一时,应同时选择组织字段。复合键保留边界,不因原值里含有连接符而碰撞;001 和 1 仍是不同文本键,不自动去空格或忽略大小写。
任一关键字段为空的记录不参加自动重复组,各自保留并进入未合并记录。默认缺失单元格和空字符串为空,纯空格和指定标记由用户确认,0、false、NULL、N/A 不一概当缺失。错误的空值定义可能把合法信息排除,应先检查来源约定。
默认只补全无冲突非空字段
同组一条电话 123、一条电话为空时,可保留 123;多条相同非空电话也视为一致。每个字段独立寻找有效来源,电话和地址可以来自不同记录。全组某字段都为空时仍保留空状态,不生成猜测值。
完整例子:001、123、空地址;001、空电话、East;002、456、West。按 id 整合后主表两条:001、123、East 和 002、456、West。主记录来源覆盖全部三条输入,第一条的电话和地址分别指向各自原记录,而不是声称某一行提供了全部信息。
两个不同非空值必须作为冲突
同编号电话分别为 123 与 456 时,默认不能覆盖。冲突报告展示全部不同值,主表仅供预览;还有未解决冲突时不能应用或导出完整确认主表,但可下载冲突与来源等审阅资料。
在组内逐字段选择“明确保留哪条来源记录”,可记录人工决定。一个电话确认不等于地址冲突也解决,修改相关输入或保留策略后需重新核对。也可选择“冲突手工确认”作为字段政策,明确保留审阅过程。
来源优先级必须明确并先审阅
“明确来源优先级”支持文件名或指定来源列,逐行填写优先顺序,第一项最高。未列入顺序的来源不会偷偷成为默认胜者;最高优先级有多个不同非空值时仍是冲突。文件最后一条不自动称为最新。
先运行查看实际冲突数量和理由,再使用审阅区的确认优先级按钮,重新运行后才按该策略输出。这个步骤让用户看到自动政策将影响哪些冲突。导出时保留字段来源和冲突报告,便于解释为什么某个来源胜出。
按时间优先要选择真实时间字段
“明确日期列优先”需选择时间列并配置已经验证的日期含义与格式。不能把文件行顺序代替更新时间。无效、空白、不支持或歧义时间会保留待审;最新日期相同却字段值不同,也不能任意挑一条。
例如电话 123 对应一月一日,456 对应一月二日,第三条电话空、日期一月三日。有效字段整合从非空电话来源选择,因此在日期有效且政策确认后保留 456,不会用最新空记录擦掉电话。如果来源空值代表明确删除,那是另一个业务规则,本工具不会由普通缺失自动推断。
保留全部值或整组不合并
“所有不同值”使用 JSON 数组保存多个非空值,例如两个电话保留为包含 123 和 456 的字符串数组。引号、逗号、换行和反斜杠按 JSON 规则转义,边界可恢复,不用无法逆向拆分的随意连接符。接收系统是否接受一个单元格中的数组,需要提前确认。
也可以将整个组标为“不合并”,保留该组全部原记录。遇到无法合理决定的冲突时,保留分开是有效结果。审阅区可撤销全部不合并决定,再次检查这些组;不强迫用户为了得到一行而丢失业务事实。
来源报告与后续验证
字段来源报告记录结果记录、字段、来源值、来源记录、文件位置与理由。多值模式保留所有参与来源,一致值的多个来源也可追溯。点击来源查看原始组,逻辑记录可能跨物理文本行。视图搜索和分页不会缩小全量冲突范围。
模糊匹配工具的“已确认实体明细”可以提供 _confirmed_entity 精确键,未确认和拒绝候选不会进入。名称本身不同仍可能是字段冲突,需要另行处理。整合后继续验证必填和唯一性:所有来源都缺地址时,整合也不能凭空满足必填;主动不合并的组可能仍不满足唯一性。
导出、规则与限制
未解决冲突时导出仅提供审阅资料,并阻止包含未确认主表的 ZIP。全部解决后才允许主表导出。CSV/TSV 会重新读取校验,公式前缀防护可能改变合法负数或加号电话,需要明确选择和核对影响。来源原始文件不覆盖。
保存规则保留字段绑定和政策;载入新文件会清除输入相关人工批准并要求复核。全量成功才可应用,样本明确标记 SAMPLE。字段来源报告可能大于输入,因此有行数、单元格和时间预算。取消保留输入与已应用步骤,刷新或关闭清空本页内存,离开前导出需要保留的结果。
常见问题
同一个人分两行,一行有电话、一行有邮箱,怎么整合?
用确认可靠的精确编号分组,再设置字段整合方式。互补字段可以合到一条,两个非空值不同则需要规则或人工选择。不要仅凭同名认定重复,结果应能追溯每个字段来自哪条记录。
去重与整合记录有什么区别?
去重选择整行保留或删除;整合逐字段决定,可同时保留不同来源中的电话和地址。
两个非空电话冲突怎么办?
默认待审,可人工选择、使用已审阅优先级、保留全部值为 JSON 数组,或整组不合并。
文件最后一条就是最新吗?
不是。时间优先必须明确选日期列并验证含义,日期无效或并列时不能擅自解决冲突。
相似姓名能直接作为重复依据吗?
不能。需要可靠精确键或已人工接受的实体映射,文字相似本身不证明身份一致。