LOAD DATA
用户可以使用 LocalOpt
参数来指定导入的数据文件位于客户端或者服务端。目前 TiDB 只支持从客户端进行数据导入,因此在导入数据时 LocalOpt
应设置成 Local
。
用户可以使用 Fields
和 Lines
参数来指定如何处理数据格式,使用 FIELDS TERMINATED BY
来指定每个数据的分隔符号,使用 FIELDS ENCLOSED BY
来指定消除数据的包围符号。如果用户希望以某个字符为结尾切分每行数据,可以使用 LINES TERMINATED BY
来指定行的终止符。
例如对于以下格式的数据:
"bob","20","street 1"\r\n
"alice","33","street 1"\r\n
如果想分别提取 bob
、20
、street 1
,可以指定数据的分隔符号为 ','
,数据的包围符号为 '\"'
。可以写成:
FIELDS TERMINATED BY ',' ENCLOSED BY '\"' LINES TERMINATED BY '\r\n'
用户可以通过 IGNORE number LINES
参数来忽略文件开始的 行,例如可以使用 IGNORE 1 LINES
来忽略文件的首行。
另外,TiDB 目前对参数 DuplicateOpt
、CharsetOpt
、LoadDataSetSpecOpt
仅支持语法解析。
-> trip_id bigint NOT NULL PRIMARY KEY AUTO_INCREMENT,
-> duration integer not null,
-> start_date datetime,
-> end_date datetime,
-> start_station_number integer,
-> start_station varchar(255),
-> end_station_number integer,
-> end_station varchar(255),
-> member_type varchar(255)
-> );
Query OK, 0 rows affected (0.14 sec)
通过 导入数据,指定数据的分隔符为逗号,忽略包围数据的引号,并且忽略文件的第一行数据。
如果此时遇到 ERROR 1148 (42000): the used command is not allowed with this TiDB version
报错信息。可以参考以下文档解决:
Query OK, 815264 rows affected (39.63 sec)
Records: 815264 Deleted: 0 Skipped: 0 Warnings: 0
LOAD DATA
也支持使用十六进制 ASCII 字符表达式或二进制 ASCII 字符表达式作为 FIELDS ENCLOSED BY
和 FIELDS TERMINATED BY
的参数。示例如下:
LOAD DATA LOCAL INFILE '/mnt/evo970/data-sets/bikeshare-data/2017Q4-capitalbikeshare-tripdata.csv' INTO TABLE trips FIELDS TERMINATED BY x'2c' ENCLOSED BY b'100010' LINES TERMINATED BY '\r\n' IGNORE 1 LINES (duration, start_date, end_date, start_station_number, start_station, end_station_number, end_station, bike_number, member_type);
以上示例中 x'2c'
是字符 ,
的十六进制表示,b'100010'
是字符 "
的二进制表示。
LOAD DATA
语句应该完全兼容 MySQL。若发现任何兼容性差异,请在 GitHub 上提 issue。