先备份原始文件
清洗前先保存一份原始 CSV。去重、替换都是不可逆操作,保留原文件可以随时对比和重来,避免误删有效记录。
删除重复行
使用CSV 数据去重按全部字段或指定列去重。按订单号、手机号这类唯一标识去重最可靠;按全部字段去重适合完全相同的重复记录。
清理空格与大小写
表格粘贴的数据常带有首尾空格,导致看起来相同的内容被当成两条。去重时勾选忽略首尾空格和忽略大小写,能显著减少“假重复”。
合并多个结构相同的文件
月度报表、分渠道数据需要汇总时,使用CSV 文件合并保留一份表头并把记录追加在一起,比手工复制粘贴更不容易漏行。
转换为 JSON 或 SQL
需要交给开发或导入数据库时,可先用CSV 转 JSON检查解析结果,再使用JSON 转 CSV或 JSON 转 SQL 完成格式转换。
最后做一次抽查
随机抽查首行、末行和含引号、逗号、换行的字段,确认解析正确。带引号的字段、含逗号的中文内容最容易在转换时出错。