最快方式是用 LOAD DATA INFILE(MySQL)或 COPY(PostgreSQL)等原生命令,关键在数据格式规范、禁用约束与索引、调优缓冲区及分批处理,避免 LOCAL INFILE 权限问题。

SQL批量导入数据最快的方式是用 LOAD DATA INFILE(MySQL)或类似原生命令(如 PostgreSQL 的 COPY),而不是逐条 INSERT。关键不在“怎么写”,而在“怎么准备”和“怎么调”。
数据文件必须干净、格式对齐
LOAD DATA 对输入格式极其敏感,稍有不一致就会报错或跳过行。务必做到:
- 字段分隔符统一(如 TAB 或逗号),避免混用空格或不可见字符
- 字符串字段用 双引号包裹,且内部双引号需转义为两个双引号("a""b")
- 日期、数字字段不能含前导/尾随空格,NULL 值统一写成 \N(MySQL)或空字段(依 NULL 处理规则)
- 首行如果是列名,加 IGNORE 1 LINES;否则别加,否则第一行数据会被跳过
关掉非必要开销,导入前临时调优
默认设置为事务安全而牺牲速度。批量导入时可临时放宽:
版权声明:除非特别标注,否则均为本站原创文章,转载时请以链接形式注明文章出处。
还木有评论哦,快来抢沙发吧~