当前位置：首页 > news >正文

mysql数据快速导入和导出

news 2026/6/17 16:37:52

在公司中，如果运营或者产品手里有几千万甚至几亿条数据，要求你将其导入数据中，请问如何做？

如果你依据运营或产品交给你的数据文件直接使用insert语句，一行一行地批量插入，那至少需要1-2天时间才能插入完毕，此时我们可以用LOADDATAINFILE语句。

LOAD DATAINFILE语句可以从一个文本文件中，将数据以很高的速度读入一个表中。MySQL官方文档也说明了，该方法比一次性插入一条数据性能快20倍。此外，mysqI也支持快速导出语句SELECT INTO OUTFILE

使用MySQL的SELECT INTO OUTFILE、LOAD DATA INFILE快速导出导入数据，12G的数据导出用时3分钟左右，导入用时4分钟左右（执行时间根据机器的配置会有所不同，不具有参考价值)

快速导入/导出

表的快速导出

语法：
SELECT... INTO OUTFILE 导出文本文件要想导出成功，需要设置安全目录才行
vim /etc/my.cnf
[mysqld]
secure-file-priv=/tmp示例：
SELECT * FROM db1.t1INTO OUTFILE '/tmp/db1_t1.txt'FIELDS TERMINATED BY ','      -- 定义字段分隔符OPTIONALLY ENCLOSED BY '"'    -- 定义字符串使用什么符号括起来LINES TERMINATED BY '\n';     -- 定义换行符

快速导入

语法
LOAD DATA INFILE 导入的文本文件路径示例
mysql> DELETE FROM student1;
mysql> create table new_t1(表结构与文件中数据保持一致);
mysql> LOAD DATA INFILE '/tmp/db1_t1.txt'INTO TABLE new_db.new_t1FIELDS TERMINATED BY ','OPTIONALLY ENCLOSED BY '"'LINES TERMINATED BY '\n';

其他导出

mysql 命令导出文本文件
示例:
# mysql -u root -pMangol123 -e 'select * from db1.t1' > /tmp/db1_t1.txt
# mysql -u root -pMangol123 --xml -e 'select * from db1.t1' > /tmp/db1_t1.xml
# mysql -u root -pMangol123 --html -e 'select * from db1.t1' > /tmp/db1_t1.html

示例

1、准备测试数据

create database mangol_test;
use mangol_test;
create table employee(
id int not null unique auto_increment,
name varchar(20) not null,
sex enum('male','female') not null default 'male', 
age int(3) unsigned not null default 28,
hire_date date not null,
post varchar(50),
post_comment varchar(100),
salary double(15,2),
office int, 
depart_id int
);#插入记录
#三个部门：教学，销售，运营
insert into employee(name,sex,age,hire_date,post,salary,office,depart_id) values
('egon','male',18,'20170301','God',7300.33,401,1),
('alex','male',78,'20150302','teacher',1000000.31,401,1),
('wupeiqi','male',81,'20130305','teacher',8300,401,1),
('yuanhao','male',73,'20140701','teacher',3500,401,1),
('liwenzhou','male',28,'20121101','teacher',2100,401,1),
('jingliyang','female',18,'20110211','teacher',9000,401,1),
('jinxin','male',18,'19000301','teacher',30000,401,1);

设置安全目录为/tmp，并重启

vim /etc/my.cnf
[mysqld]
secure-file-priv=/tmp

快速导出

SELECT * FROM egon_test.employeeINTO OUTFILE '/tmp/test.txt'FIELDS TERMINATED BY ','      -- 定义字段分隔符OPTIONALLY ENCLOSED BY '"'    -- 定义字符串使用什么符号括起来LINES TERMINATED BY '\n';     -- 定义换行符

导入

# 创建表，表结构与数据保持一致
create database if not exists test;
use test;
create table t1(id int not null unique auto_increment,name varchar(20) not null,sex enum('male','female') not null default 'male', age int(3) unsigned not null default 28,hire_date date not null,post varchar(50),post_comment varchar(100),salary double(15,2),office int, depart_id int
);# 快速导入
LOAD DATA INFILE '/tmp/test.txt'INTO TABLE test.t1FIELDS TERMINATED BY ','OPTIONALLY ENCLOSED BY '"'LINES TERMINATED BY '\n';

查看全文

http://www.jsqmd.com/news/628698/