MySQL用load data命令进行数据导入方法
load data命令是mysql中自带的一个数据导入导出命令,他可以快速导入上千万级别的数据并且不卡机,下面我来给大家介绍load data命令用法.
LOAD DATA语法说明:LOAD DATA INFILE句法:
- LOADDATA[LOW_PRIORITY][LOCAL]INFILE'file_name.txt'[REPLACE|IGNORE]
- INTOTABLEtbl_name
- [FIELDS
- [TERMINATEDBY't']
- [OPTIONALLY]ENCLOSEDBY'']
- [ESCAPEDBY'\']]
- [LINESTERMINATEDBY'n']
- [IGNOREnumberLINES]
- [(col_name,...)]
最简单的方法,代码如下:
mysql>load data local infile "D:/ab.txt" into table mytbl(name,age);
MySQL支持load data命令的数据导入,该方式比直接的insert的效率要高,按照官方的说法是要比insert语句快上20倍,使用方式如下:
mysql>load data local infile "D:/ab.txt" into table mytbl(name,age);
使用上述的命令就可以将D:/ab.txt文件的内容导入到表mytbl中,其中name和age是表mytbl的字段,对应ab.txt文件中每行的数据,如果编译安装mysql时没有指定–enable-local-infile,那么在使用上述命令时会报如下错误:
ERROR 1148 (42000): The used command is not allowed with this MySQL version
解决方式有两种,一是重新编译安装加上上面的参数,而是直接用命令行执行,如下:
mysql -uroot -proot mydb_name --local-infile=1 -e 'load data local infile "D:/ab.txt" into table mytbl(name,age)'
测试了一把,导入300万条数据时,使用load data命令的时间花销大概在3分钟左右,还是非常不错的.
导入时一些常用错误,系统报错:Data truncated for column 'f3' at row 1
可能是由于字段定义为double型,而文本文件中是空值,将文本文件更新为:
abc;cdef;2;
再次导入,报错如下:Row 1 doesn't contain data for all columns
分析原因可能是由于表中字段一共是5个,而在文本数据源中有了4个字段,少1个字段.
Data truncated for column 'f3' at row 1 ,
我理解系统应当按空值处理,即在数据库中这个字段default值为“-1”.
解决办法,代码如下:
- loaddatainfile'D:\my_program\Tek_sig\example_data1.txt'
- intotableTABLE_NAME--phpfensi.com
- FIELDSTERMINATEDBY';'
- LINESTERMINATEDBY'n'
- (f1,f2,f3,f4)
热门评论