先备份原始文件

清洗前先保存一份原始 CSV。去重、替换都是不可逆操作,保留原文件可以随时对比和重来,避免误删有效记录。

删除重复行

使用CSV 数据去重按全部字段或指定列去重。按订单号、手机号这类唯一标识去重最可靠;按全部字段去重适合完全相同的重复记录。

清理空格与大小写

表格粘贴的数据常带有首尾空格,导致看起来相同的内容被当成两条。去重时勾选忽略首尾空格和忽略大小写,能显著减少“假重复”。

合并多个结构相同的文件

月度报表、分渠道数据需要汇总时,使用CSV 文件合并保留一份表头并把记录追加在一起,比手工复制粘贴更不容易漏行。

转换为 JSON 或 SQL

需要交给开发或导入数据库时,可先用CSV 转 JSON检查解析结果,再使用JSON 转 CSVJSON 转 SQL 完成格式转换。

最后做一次抽查

随机抽查首行、末行和含引号、逗号、换行的字段,确认解析正确。带引号的字段、含逗号的中文内容最容易在转换时出错。