【轉載】oracle 資料匯入匯出
一、oracle中copy from的用法
1.語法及使用說明
1.1 語法
下面我們來看一下SQL*Copy Command的語法及使用說明。
在解釋SQL*Plus Copy Command的語法之前,我們必須要明確SQL*Plus Copy Command不是一個方法或是函式,也不是一個SQL語句,它是一個命令(command),當然這個命令必須在SQL*Plus裡執行。
SQL*Plus Copy Command的語法:
COPY {FROM database | TO database | FROM database TO database} {APPEND|CREATE|INSERT|REPLACE} destination_table [(column, column, column, ...)]
USING query
我們分部分來解釋一下:
COPY – 這個不太需要解釋,主命令,宣告要執行COPY操作
From Database – 源
To Database – 目標資料庫
此處注意花括號中有三種可選的寫法(以”|”隔開),如果源資料表和目標資料表在同一個Schema中,則可以只寫From Database,也可以只寫To Database,當然還可以是第三種寫法,把From Database和To Database寫全。但如果源資料表和目標資料表不在同一個Schema中,則必須用第三種寫法,即把From Database和To Database都寫全
From Database和To Database的格式是一樣的:USERID/[email protected]
{APPEND|CREATE|INSERT|REPLACE} – 宣告操作資料的方式,下面分別解釋一下:
Append – 向已有的目標表中追加記錄,如果目標表不存在,自動建立,這種情況下和Create等效。
Create – 建立目標表並且向其中追加記錄,如果目標表已經存在,則會返回錯誤。
Insert – 向已有的目標表中插入記錄,與Append不同的是,如果目標表不存在,不自動建立而是返回錯誤。
Replace – 用查詢出來的資料覆蓋已有的目標表中的資料,如果目標表不存在,自動建立。
destination_table – 目標表的名字
[(column, column, column, ...)] – 可以指定目標表中列的名字,如果不指定,則自動使用Query中的列名。
USING query – 查詢語句,交流的資料來自這兒。
備註:
1.這種方法適合小額資料的遷移,只能在SQL*PLUS中執行.
2.這種方法不能copy大物件的表,不然會拋異常"CPY0012: Object datatypes cannot be copied"
1.2 使用範例
下面我們通過幾個例子來看一下SQL*Plus Copy 命令的使用:
1.2.1 在同一個伺服器的同一個Schema中複製資料:
同時指定From database和To database
SQL> copy from scott/[email protected] to scott/[email protected] create dept1 using select * from dept;
只指定From Database
SQL> copy from scott/[email protected] create dept2 using select * from dept;
只指定To Database
SQL> copy to scott/[email protected] create dept3 using select * from dept;
1.2.2 在同一個伺服器的不同Schema中複製資料:
這種情況下必須同時指定From Database和To Database
SQL> copy from scott/[email protected] to lsjdemo/[email protected] create dept using select * from dept;
注意這種情況下,using select * from dept 中並不需要使用scott.demp的形式。
1.2.3 在不同的伺服器間複製資料:
SQL> conn lsj/[email protected]
已連線。
SQL> copy from scott/[email protected] to lsj/[email protected] create dept using select * from dept;
2.4 效能實驗結果
實驗資料:
記錄數:5,082,500
資料量:504M
實驗結果
方案------------------------執行時間(秒) ---------Undo(M) ------Redo(M)
Copy command -------------520.51----------------------0 ---------------- 592
Insert into…select …---- 631.64 ------------------345 -------------1720
Create Table…------------- 244.79 --------------------0 ----------------515
2.總結
Create Table…as select…是最快的,而且生成的Undo和Redo資訊最少,所以只要可能,請儘量使用這種方案。但這種方案有一定的限制,即目標表必須是不存在的,不能用它向已有的目標表中追加記錄。
Insert into … select … 是最慢的,而且生成最多的Undo和Redo資訊,對I/O的壓力最大,優勢在於大家對它比較熟悉,使用起來比較簡單,適合於處理少量的資料,若要處理大量的資料,不推薦使用這種方案。
Copy Command可以處理Create Table不能處理的情況,即向已有的資料表中追加記錄,相對於insert來說,效率更高一些,生成更少的Redo資訊,不生成Undo資訊,所以在執行大量的資料追加時,推薦使用Copy Command命令。
二、資料泵匯出匯入(EXPDP和IMPDP)
Oracle Database 10g以後引入了最新的資料泵(Data Dump)技術,使DBA或開發人員可以將資料庫元資料(物件定義)和資料快速移動到另一個oracle資料庫中。
資料泵匯出匯入(EXPDP和IMPDP)的作用
1、實現邏輯備份和邏輯恢復。
2、在資料庫使用者之間移動物件。
3、在資料庫之間移動物件
4、實現表空間搬移。
資料泵匯出匯入與傳統匯出匯入的區別:
在10g之前,傳統的匯出和匯入分別使用EXP工具和IMP工具,從10g開始,不僅保留了原有的EXP和IMP工具,還提供了資料泵匯出匯入工具EXPDP和IMPDP.使用EXPDP和IMPDP時應該注意的事項;
EXP和IMP是客戶段工具程式,它們既可以在客戶端使用,也可以在伺服器段使用。
EXPDP和IMPDP是服務端的工具程式,他們只能在ORACLE服務端使用,不能在客戶端使用
IMP只適用於EXP匯出檔案,不適用於EXPDP匯出檔案;IMPDP只適用於EXPDP匯出檔案,而不適用於EXP匯出檔案。
今天我在匯入同事給我的資料檔案時,總是報IMP-00038錯誤,提示,無法轉換為環境字符集控制代碼,造成這種錯誤的原因一般是資料庫版本不匹配,但是我們使用的都是oracle11g,就排除了這種可能。最後發現原因是他是使用資料泵匯出的資料檔案,而我使用傳統imp命令匯入是不可以的,後續改為使用impdp資料泵匯入成功。
下面是我使用資料泵匯入資料檔案的完整過程:
1、使用system使用者登入資料庫,建立新使用者usertest(新建使用者時使用者名稱最好和資料檔案匯出時的使用者名稱相同),表空間可以使用系統預設的也可以自己新建一個表空間。sql程式碼如下:
新建使用者使用oracle預設表空間:
create user usertest identified by usertest;
新建表空間:
create tablespace user_all
datafile 'D:/dev/oracle/tablespace/user_all.dbf'
size 300M
autoextend on
next 50M
maxsize unlimited
新建使用者(設定預設表空間):
create user usertest identified by usertest default tablespace user_all;
2、對新建的使用者賦許可權,dba、connect、resource。sql程式碼如下:
grant connect, resource,dba to usertest;
3、為資料庫匯入匯出,新建目錄檔案 如dumpdir
create directory 目錄名稱 as '資料庫伺服器上的一個目錄',如:
create directory dumpdir as 'd:\伺服器目錄名';
將匯入或匯出的檔案放在這個目錄下
4、為此使用者的匯入匯出目錄賦讀寫許可權
grant read,write on directory dumpdir to usertest;
5、匯出及匯入
以SID=orcl,匯出dmp的賬號為usertest,匯入dmp的賬號為usertest為例。
若將資料從sfz中匯出:
expdp usertest/[email protected] directory=dumpdir dumpfile=匯出檔名
匯入到usertest中:
impdp usertest/[email protected] directory=dumpdir dumpfile=匯出檔名.dmp
匯入匯出使用者名稱最好相同,使用者名稱不同時,還需要做個對映
remap_schema=test:usertest
注意在使用本地資料庫時,要啟動以下oracle服務:
OracleOraDb11g_home1TNSListener
OracleServiceORCL
如果只是連線遠端伺服器上的資料庫,僅使用PL/SQL工具,那麼可以把服務全停,這樣能省點記憶體。
三、oracle中exp,imp(匯入,匯出)
今天說說Oracle資料庫的匯入(imp.exe)和匯出(exp.exe)命令的使用,我們的電腦裡面安裝完Oracle或OracleClient的時候,在我們的安裝目錄裡面就有這兩個命令了,一般是在你的Oracle安裝目錄下面的bin資料夾下面會有exp.exe和imp.exe這兩個檔案,它們都是在命令列下執行,首先開啟你的CMD程式,然後切換到Oracle的bin目錄下面。下面就看看這兩個命令的具體用法:
基本語法和例項:
1、EXP:
有三種主要的方式(完全、使用者、表)
1、完全:
EXP SYSTEM/MANAGER BUFFER=64000 FILE=C:\FULL.DMP FULL=Y
如果要執行完全匯出,必須具有特殊的許可權
2、使用者模式:
EXP SONIC/SONIC BUFFER=64000 FILE=C:\SONIC.DMP OWNER=SONIC
這樣使用者SONIC的所有物件被輸出到檔案中。
3、表模式:
EXP SONIC/SONIC BUFFER=64000 FILE=C:\SONIC.DMP OWNER=SONIC TABLES=(SONIC)
這樣使用者SONIC的表SONIC就被匯出
2、IMP:
具有三種模式(完全、使用者、表)
1、完全:
IMP SYSTEM/MANAGER BUFFER=64000 FILE=C:\FULL.DMP FULL=Y
2、使用者模式:
IMP SONIC/SONIC BUFFER=64000 FILE=C:\SONIC.DMP FROMUSER=SONIC TOUSER=SONIC
這樣使用者SONIC的所有物件被匯入到檔案中。必須指定FROMUSER、TOUSER引數,這樣才能匯入資料。
3、表模式:
EXP SONIC/SONIC BUFFER=64000 FILE=C:\SONIC.DMP OWNER=SONIC TABLES=(SONIC)
這樣使用者SONIC的表SONIC就被匯入。
ORACLE資料庫有兩類備份方法。第一類為物理備份,該方法實現資料庫的完整恢復,但資料庫必須執行在歸擋模式下(業務資料庫在非歸擋模式下執行),且需要極大的外部儲存裝置,例如磁帶庫;第二類備份方式為邏輯備份,業務資料庫採用此種方式,此方法不需要資料庫執行在歸擋模式下,不但備份簡單,而且可以不需要外部儲存裝置。
資料庫邏輯備份方法
ORACLE資料庫的邏輯備份分為三種模式:表備份、使用者備份和完全備份。
表模式
備份某個使用者模式下指定的物件(表)。業務資料庫通常採用這種備份方式。
若備份到本地檔案,使用如下命令:
exp icdmain/icd rows=y indexes=n compress=n buffer=65536
feedback=100000 volsize=0
file=exp_icdmain_csd_yyyymmdd.dmp
log=exp_icdmain_csd_yyyymmdd.log
tables=icdmain.commoninformation,icdmain.serviceinfo,icdmain.dealinfo
若直接備份到磁帶裝置,使用如下命令:
exp icdmain/icd rows=y indexes=n compress=n buffer=65536
feedback=100000 volsize=0
file=/dev/rmt0
log=exp_icdmain_csd_yyyymmdd.log
tables=icdmain.commoninformation,icdmain.serviceinfo,icdmain.dealinfo
注:在磁碟空間允許的情況下,應先備份到本地伺服器,然後再拷貝到磁帶。出於速度方面的考慮,儘量不要直接備份到磁帶裝置。
使用者模式
備份某個使用者模式下的所有物件。業務資料庫通常採用這種備份方式。
若備份到本地檔案,使用如下命令:
exp icdmain/icd owner=icdmain rows=y indexes=n compress=n buffer=65536
feedback=100000 volsize=0
file=exp_icdmain_yyyymmdd.dmp
log=exp_icdmain_yyyymmdd.log
若直接備份到磁帶裝置,使用如下命令:
exp icdmain/icd owner=icdmain rows=y indexes=n compress=n buffer=65536
feedback=100000 volsize=0
file=/dev/rmt0
log=exp_icdmain_yyyymmdd.log
注:如果磁碟有空間,建議備份到磁碟,然後再拷貝到磁帶。如果資料庫資料量較小,可採用這種辦法備份。
以下為詳細的匯入匯出例項:
一、資料匯出:
1、 將資料庫TEST完全匯出,使用者名稱system 密碼manager 匯出到D:\daochu.dmp中
exp system/[email protected] file=d:\daochu.dmp full=y
2、 將資料庫中system使用者與sys使用者的表匯出
exp system/[email protected] file=d:\daochu.dmp owner=(system,sys)
3、 將資料庫中的表table1 、table2匯出
exp system/[email protected] file=d:\daochu.dmp tables=(table1,table2)
4、 將資料庫中的表table1中的欄位filed1以"00"打頭的資料匯出
exp system/[email protected] file=d:\daochu.dmp tables=(table1) query=\" where filed1 like '00%'\"
上面是常用的匯出,對於壓縮我不太在意,用winzip把dmp檔案可以很好的壓縮。
不過在上面命令後面 加上 compress=y 就可以了
二、資料的匯入
1、將D:\daochu.dmp 中的資料匯入 TEST資料庫中。
imp system/[email protected] file=d:\daochu.dmp
上面可能有點問題,因為有的表已經存在,然後它就報錯,對該表就不進行匯入。
在後面加上 ignore=y 就可以了。
2 將d:\daochu.dmp中的表table1 匯入
imp system/[email protected] file=d:\daochu.dmp tables=(table1)
基本上上面的匯入匯出夠用了。不少情況我是將表徹底刪除,然後匯入。
注意:
如果你的密碼中包含特殊字元,在Windows下就需要用三個雙引號擴起來,如:
exp skytf/"""#$adf`%6^=dfom"""@skytf buffer=52428800 file=skytf.dmp
如果是在Linux系統下,則密碼用一對雙引號, 整體userid和password用對單引號括住,如:
exp 'skytf/"?`}:=*H"@skytf'"<[email protected]#<>?`}:Q*H"@skytf' DIRECT=Y buffer=52428800 FEEDBACK=10000 statistics=none file=skytf.dmp
密碼中包含特殊字元的使用,具體請看《Oracle密碼中含有特殊字元時exp,imp的使用》文章
你要有足夠的許可權,許可權不夠它會提示你。
資料庫時可以連上的。可以用tnsping TEST 來獲得資料庫TEST能否連上。
出處:http://www.cnblogs.com/yugen/archive/2010/07/25/1784763.html
============================================================
假設我如此寫匯出語句:exp aaa/[email protected] file=a.dmp full=y; 與 exp aaa/[email protected] file=a.dmp (即不加full=y語句)匯出的資料檔案有什麼區別呢?
(假設在資料庫例項中還有bbb、ccc、ddd使用者;資料庫還有ora、oracl例項)能說得詳細一些嗎?謝謝了!!
-------------------------------
1.如果加上“full=y”,將整個資料庫全部匯出,需要特殊的許可權(具體什麼許可權沒研究過),一般用system使用者就足夠了,普通使用者是不可以的
2.不加“full=y”,預設匯出連線資料庫的使用者資料庫物件,比如:exp aaa/[email protected] file=a.dmp,匯出aaa模式下的所有資料庫物件
3.你說的有多個使用者,可以使用system來指定匯出哪個使用者的資料庫物件,比如:exp aaa/[email protected] file=a.dmp owner=(bbb,ccc),普通使用者是不可以指定owner的
4.資料有多個例項的情況,這個要看你“@”後面是什麼,如果@oracle,則在oracle例項上進行匯出,@ora,則在ora例項上進行匯出
FULL 匯出整個資料庫 預設是禁止的
不加的就是不匯出整個資料庫 只匯出該使用者下的資料 那麼bbb使用者的資料就不會匯出來。
可以按下面測試:
exp aaa/[email protected] file=a.dmp full=y;
exp aaa/[email protected] file=b.dmp;
四、exp/imp和expdp/impdp在功能上的區別
Oracle10g提出的資料泵技術,在以下幾個方面優於exp/imp命令:
1、資料泵工具運行於伺服器端,相比客戶端的exp/imp其效能更好,並能實現exp/imp的全部功能。
2、通過使用exclude,include,content等引數,資料泵可以為資料及資料物件提供更細微級別的選擇性。
3、通過設定資料庫版本號,資料泵可以相容老版本的資料庫系統。
4、並行執行。
5、通過estimate_only引數,資料泵可以預估匯出作業所需的磁碟空間。
6、支援分散式環境中通過資料庫連線實現匯入\匯出。
7、支援匯入時重新對映功能(即將物件匯入到新的目標資料檔案、架構及表空間等)。
8、支援元資料壓縮及資料取樣。