mysql高速导入导出大容量TXT文本_MySQL
mysql高速导入导出大容量TXT文本
先谈谈如何mysql导入TXT
用到loaddata, MySQL的LOAD DATA INFILE语句用于高速地从一个文本文件中读取行,并装入一个表中。LOAD DATA INFILE语句从一个文本文件中以很高的速度读入一个表中。
load data参数配置:
SQL代码
LOAD DATA [LOW_PRIORITY] [LOCAL] INFILE 'file_name.txt(file路径)' [REPLACE | IGNORE]
INTO TABLE tbl_name
[FIELDS
[TERMINATED BY '/t']
[OPTIONALLY] ENCLOSED BY '']
[ESCAPED BY '//' ]]
[LINES TERMINATED BY '/n']
[IGNORE number LINES]
[(col_name,...)]
如果指定LOCAL关键词,从客户本地主机读文件。如果LOCAL没指定,文件必须位于服务器上(远程用的)。(LOCAL在MySQL3.22.6或以后版本中可用。)如果你指定关键词LOW_PRIORITY,LOAD DATA语句的执行被推迟到没有其他客户读取表后。REPLACE和IGNORE关键词控制对现有的唯一键记录的重复的处理。如果你指定REPLACE,新行将代替有相同的唯一键值的现有行。
如果你 指定IGNORE,跳过有唯一键的现有行的重复行的输入。如果你不指定任何一个选项,当找到重复键键时,出现一个错误,并且文本文件的余下部分被忽略时。如果你使用LOCAL关键词从一个本地文件装载数据,服务器没有办法在操作的当中停止文件的传输,因此缺省的行为好像IGNORE被指定一样。LOAD DATA INFILE是SELECT ... INTO OUTFILE的逆操作,SELECT句法。为了将一个数据库的数据写入一个文件,使用SELECT ... INTO OUTFILE,为了将文件读回数据库,使用LOAD DATA INFILE。两个命令的FIELDS和LINES子句的语法是相同的。两个子句是可选的,但是如果指定两个,FIELDS必须在LINES之前。
如果你指定一个FIELDS子句,它的每一个子句(TERMINATED BY, [OPTIONALLY] ENCLOSED BY和ESCAPED BY)也是可选的,除了你必须至少指定他们之一。
如果你不指定一个FIELDS子句,缺省值与如果你这样写的相同:
FIELDS TERMINATED BY '/t' ENCLOSED BY '' ESCAPED BY '//'
如果你不指定一个LINES子句,缺省值与如果你这样写的相同:
LINES TERMINATED BY '/n'
换句话说,缺省值导致读取输入时,LOAD DATA INFILE表现如下:
在换行符处寻找行边界
在定位符处将行分进字段
不要期望字段由任何引号字符封装
将由“/”开头的定位符、换行符或“/”解释是字段值的部分字面字符
相反,缺省值导致在写入输出时,SELECT ... INTO OUTFILE表现如下:
在字段之间写定位符
不用任何引号字符封装字段
使用“/”转义出现在字段中的定位符、换行符或“/”字符
在行尾处写换行符
注意,为了写入FIELDS ESCAPED BY '//',对作为一条单个的反斜线被读取的值,你必须指定2条反斜线值。
IGNORE number LINES选项可被用来忽略在文件开始的一个列名字的头:
mysql> LOAD DATA INFILE "/tmp/file_name" into table test IGNORE 1 LINES;
我建了一个demo表:
SQL代码
mysql> use DB_cmd_demo;
mysql> explain insertdemo;
+-------+-------------+------+-----+---------+-------+
| Field | Type | Null | Key | Default | Extra |
+-------+-------------+------+-----+---------+-------+
| code | varchar(25) | YES | | NULL | |
| demo | varchar(15) | NO | | | |
+-------+-------------+------+-----+---------+-------+
2 rows in set (0.01 sec)
File_AA.txt文本格式如下:
XML/HTML代码
AAVTUALOJJKEC
AAHRFTXIBLGYG
AAOAQVLJROSBT
AACNKRKBZEDPE
SQL代码
mysql> load data local infile 'd:/File_AA.txt' into table insertdemo (demo);
Query OK, 4 rows affected (0.00 sec)
Records: 4 Deleted: 0 Skipped: 0 Warnings: 0
生成如下:
SQL代码
mysql> select * from insertdemo;
+------+----------------+
| code | demo |
+------+----------------+
| NULL | AACNKRKBZEDPE |
| ULL | AAOAQVLJROSBT
| ULL | AAHRFTXIBLGYG
| ULL | AAVTUALOJJKEC
+------+----------------+
4 rows in set (0.00 sec)
再谈谈mysql如何导出到TXT
这是网上的一个demo,在这里贴一下,其实两个用法主要是理解每个参数的用法就OK了
SQL代码
-- 导出数据为文本文件
SELECT demo,code
INTO OUTFILE 'd:/DM_HY_EXPORT.TXT'
FIELDS TERMINATED BY ',' OPTIONALLY ENCLOSED BY ''''
LINES TERMINATED BY '/n'
FROM insertdemo;
FIELDS TERMINATED BY ',' 数据字段间用逗号隔开
OPTIONALLY ENCLOSED BY '''' 每个字段的数据用单引号括住(注意单引号的表达方法)
LINES TERMINATED BY '/n' 每条数据结束用'/n'作为换行符。
bitsCN.com