1. 程式人生 > >【轉載】Mysql load data infile用法(萬級數據導入,在幾秒之內)

【轉載】Mysql load data infile用法(萬級數據導入,在幾秒之內)

輸入 工具 分割 field 服務 分隔 load data tab lose

https://blog.csdn.net/u014082714/article/details/53173975

http://blog.itpub.net/26506993/viewspace-2084878/

我們常常導入數據!mysql有一個高效導入方法,那就是load data infile 下面來看案例說明

基本語法: load data [low_priority] [local] infile ‘file_name txt‘ [replace | ignore]
into table tbl_name
[fields
[terminated by‘t‘]
[OPTIONALLY] enclosed by ‘‘]
[escaped by‘\‘ ]]
[lines terminated by‘n‘]
[ignore number lines]
[(col_name, )]

load data infile語句從一個文本文件中以很高的速度讀入一個表中。使用這個命令之前,mysqld進程(服務)必須已經在運行。為了安全原因,當讀取位於服務器上的文本文件時,文件必須處於數據庫目錄或可被所有人讀取。另外,為了對服務器上文件使用load data infile,在服務器主機上你必須有file的權限。 1 如果你指定關鍵詞low_priority,那麽MySQL將會等到沒有其他人讀這個表的時候,才把插入數據。可以使用如下的命令:
load data low_priority infile "/home/mark/data sql" into table Orders;
2 如果指定local關鍵詞,則表明從客戶主機讀文件。如果local沒指定,文件必須位於服務器上。 3 replace和ignore關鍵詞控制對現有的唯一鍵記錄的重復的處理。如果你指定replace,新行將代替有相同的唯一鍵值的現有行。如果你指定ignore,跳過有唯一鍵的現有行的重復行的輸入。如果你不指定任何一個選項,當找到重復鍵時,出現一個錯誤,並且文本文件的余下部分被忽略。例如: load data low_priority infile "/home/mark/data sql" replace into table Orders; 4 分隔符 (1) fields關鍵字指定了文件記段的分割格式,如果用到這個關鍵字,MySQL剖析器希望看到至少有下面的一個選項:
terminated by分隔符:意思是以什麽字符作為分隔符
enclosed by字段括起字符
escaped by轉義字符 terminated by描述字段的分隔符,默認情況下是tab字符(\t)
enclosed by描述的是字段的括起字符。
escaped by描述的轉義字符。默認的是反斜杠(backslash:\ ) 例如:load data infile "/home/mark/Orders txt" replace into table Orders fields terminated by‘,‘ enclosed by ‘"‘;
(2)lines 關鍵字指定了每條記錄的分隔符默認為‘\n‘即為換行符 如果兩個字段都指定了那fields必須在lines之前。如果不指定fields關鍵字缺省值與如果你這樣寫的相同: fields terminated by‘\t‘ enclosed by ’ ‘‘ ‘ escaped by‘\\‘ 如果你不指定一個lines子句,缺省值與如果你這樣寫的相同: lines terminated by‘\n‘ 例如:load data infile "/jiaoben/load.txt" replace into table test fields terminated by ‘,‘ lines terminated by ‘/n‘; 5 load data infile 可以按指定的列把文件導入到數據庫中。 當我們要把數據的一部分內容導入的時候,,需要加入一些欄目(列/字段/field)到MySQL數據庫中,以適應一些額外的需要。比方說,我們要從Access數據庫升級到MySQL數據庫的時候 下面的例子顯示了如何向指定的欄目(field)中導入數據:
load data infile "/home/Order txt" into table Orders(Order_Number, Order_Date, Customer_ID);
6 當在服務器主機上尋找文件時,服務器使用下列規則:
(1)如果給出一個絕對路徑名,服務器使用該路徑名。
(2)如果給出一個有一個或多個前置部件的相對路徑名,服務器相對服務器的數據目錄搜索文件。
(3)如果給出一個沒有前置部件的一個文件名,服務器在當前數據庫的數據庫目錄尋找文件。
例如: /myfile txt”給出的文件是從服務器的數據目錄讀取,而作為“myfile txt”給出的一個文件是從當前數據庫的數據庫目錄下讀取。 註意:字段中的空值用\N表示


LOAD DATA INFILE 一直被認為是MySQL很強大的一個數據導入工具,因為他速度非常的快。
不過有幾個問題一定要註意
1、編碼。
2、靈活導入導出。

一個例子:

先創建一個表:

CREATE TABLE Salary(

Id_P INT,

Salary INT

);

然後在D盤根目錄下創建了一個data.txt文本文件。

data.txt的內容:

1,10000
2,8000
3,12000
4,9000
5,12000
6,10000
7,13000

然後執行:

load data local infile "D:/data.txt" into table salary fields terminated by ‘,‘;

執行之後data.txt中的數據就全部插入到Salary表中了。

註意:

terminated by ‘,‘制定了data.txt中的數據字段間的分割符為‘,‘。

【轉載】Mysql load data infile用法(萬級數據導入,在幾秒之內)