Oraclesqlldr的⽤法(这个最完整)
在 Oracle 数据库中,我们通常在不同数据库的表间记录进⾏复制或迁移时会⽤以下⼏种⽅法:
1. A 表的记录导出为⼀条条分号隔开的 insert 语句,然后执⾏插⼊到 B 表中
2. 建⽴数据库间的 dblink,然后⽤ create table B as select * from where ...,或 insert into B select * from where ...
3. exp A 表,再 imp 到 B 表,exp 时可加查询条件
4. 程序实现 select from A ..,然后 insert into B ...,也要分批提交
5. 再就是本篇要说到的 Sql Loader(sqlldr) 来导⼊数据,效果⽐起逐条 insert 来很明显
第 1 种⽅法在记录多时是个噩梦,需三五百条的分批提交,否则客户端会死掉,⽽且导⼊过程很慢。如果要不产⽣ REDO 来提⾼ insert into 的性能,就要下⾯那样做:
1. alter table B nologging;
2. insert /* +APPEND */ into B(c1,c2) values(x,xx);
3. insert /* +APPEND */ into B select * from A@dblink where .....;
好 啦,前⾯简述了 Oracle 中数据导⼊导出的各种⽅法,我想⼀定还有更⾼明的。下⾯重点讲讲 Oracle 的 Sql Loader (sqlldr) 的⽤法。在命令⾏下执⾏ Oracle 的 sqlldr 命令,可以看到它的详细参数说明,要着重关注以下⼏个参数:
userid -- Oracle 的 username/password[@servicename]
control -- 控制⽂件,可能包含表的数据
-------------------------------------------------------------------------------------------------------
log -- 记录导⼊时的⽇志⽂件,默认为 控制⽂件(去除扩展名).log
bad -- 坏数据⽂件,默认为 控制⽂件(去除扩展名).bad
data -- 数据⽂件,⼀般在控制⽂件中指定。⽤参数控制⽂件中不指定数据⽂件更适于⾃动操作
errors -- 允许的错误记录数,可以⽤他来控制⼀条记录都不能错
rows -- 多少条记录提交⼀次,默认为 64
skip -- 跳过的⾏数,⽐如导出的数据⽂件前⾯⼏⾏是表头或其他描述
还有更多的 sqlldr 的参数说明请参考:。
⽤例⼦来演⽰ sqlldr 的使⽤,有两种使⽤⽅法:
1. 只使⽤⼀个控制⽂件,在这个控制⽂件中包含数据
2. 使⽤⼀个控制⽂件(作为模板) 和⼀个数据⽂件
⼀般为了利于模板和数据的 分离,以及程序的不同分⼯会使⽤第⼆种⽅式,所以先来看这种⽤法。数据⽂件可以是 CSV ⽂件或者以其他分割符分隔的,数据⽂件可以⽤ PL/SQL Developer 或者 Toad 导出,也可以。另外,⽤ Toad 还能直接⽣成包含数据的控制⽂件。
⾸先,假定有这么⼀个表 users,并插⼊五条记录:
1. create table users(
2. user_id number, --⽤户 ID
3. user_name varchar2(50), --⽤户名
4. login_times number, --登陆次数
5. last_login date --最后登录⽇期
6. )
1. insert into users values(1,'Unmi',3,sysdate);
2. insert into users values(2,NULL,5,to_date('2008-10-15','YYYY-MM-DD'));
3. insert into users values(3,'隔叶黄莺 ',8,to_date('2009-01-02','YYYY-MM-DD'));
4. insert into users values(4,'Kypfos',NULL,NULL);
5. insert into users values(5,'不知秋 ',1,to_date('2008-12-23','YYYY-MM-DD'));
第 ⼆种⽅式: 使⽤⼀个控制⽂件(作为模板) 和⼀个数据⽂件
1) 建⽴数据⽂件,我们这⾥⽤ PL/SQL Developer 导出表 users 的记录为 users_data.csv ⽂件,内容如下:
1. " ","USER_ID","USER_NAME","LOGIN_TIMES","LAST_LOGIN"
2. "1","1","Unmi","3","2009-1-5 20:34:44"
3. "2","2","","5","2008-10-15"
4. "3","3","隔叶黄莺","8","2009-1-2"
5. "4","4","Kypfos","",""
6. "5","5","不知秋","1","2008-12-23"
2) 建⽴⼀个控制⽂件 l,内容如下:
1. OPTIONS (skip=1,rows=128) -- sqlldr 命令显⽰的 选项可以写到这⾥边来,skip=1 ⽤来跳过数据中的第⼀⾏
2. LOAD DATA
3. INFILE "users_data.csv"--指定外部数据⽂件,可以写多 个 INFILE "another_data_file.csv" 指定多个数据⽂件
4. --这⾥还可以使 ⽤ BADFILE、DISCARDFILE 来指定坏数据和丢弃数据的⽂件,
5. truncate --操作类型,⽤ truncate table 来清除表中原有 记录
6. INTO TABLE users -- 要插⼊记录的表
7. Fields terminated by ","-- 数据中每⾏记录⽤ "," 分隔
8. Optionally enclosed by '"' -- 数据中每个字段⽤ '"' 框起,⽐如字段中有 "," 分隔符时
9. trailing nullcols --表的字段没有对应的值时允 许为空
10. (
11. virtual_column FILLER, --这是⼀个虚拟字段,⽤来跳 过由 PL/SQL Developer ⽣成的第⼀列序号
12. user_id number, --字段可以指定类型,否则认 为是 CHARACTER 类型, log ⽂件中有显⽰
13. user_name,
14. login_times,
15. last_login DATE "YYYY-MM-DD HH24:MI:SS"-- 指定接受⽇期的格式,相当⽤ to_date() 函数转换
16. )
说 明:在操作类型 truncate 位置可⽤以下中的⼀值:
1) insert --为缺省⽅式,在数据装载开始时要求表为空
2) append --在表中追加新记录
3) replace --删除旧记录(⽤ delete from table 语句),替换成新装载的记录
4) truncate --删除旧记录(⽤ truncate table 语句),替换成新装载的记录
3) 执⾏命令:
sqlldr l
在 dbservice 指⽰的数据库的表 users 中记录就和数据⽂件中的⼀样了。
执⾏完 sqlldr 后希望能留意⼀下⽣成的⼏个⽂件,如 users.log ⽇志⽂件、users.bad 坏数据⽂件等。特别是要看看⽇志⽂件,从中可让你更好的理解 Sql Loader,⾥⾯有对控制⽂件的解析、列出每个字段的类型、加载记录的统计、出错原因等信息。
第⼀种⽅式,只使⽤⼀个控制⽂件 在这个控制⽂件中包含数据
1) 把 users_data.cvs 中的内容补到 l 中,并以 BEGINDATA 连接,还要把 INFILE "users_data.csv" 改为 INFILE *。同时为了更⼤化的说明问题,把数据处理了⼀下。此时,完整的 l ⽂件内容是:
1. OPTIONS (skip=1,rows=128) -- sqlldr 命令显⽰的 选项可以写到这⾥边来,skip=1 ⽤来跳过数据中的第⼀⾏
2. LOAD DATA
3. INFILE * -- 因为数据同控制⽂件在⼀ 起,所以⽤ * 表⽰
4. append -- 这⾥⽤ 了 append 来操作,在表 users 中附加记录
5. INTO TABLE users
6. when LOGIN_TIMES<>'8' -- 还可以⽤ when ⼦ 句选择导⼊符合条件的记录
7. Fields terminated by ","
8. trailing nullcols
9. (
10. virtual_column FILLER, --跳过 由 PL/SQL Developer ⽣成的第⼀列序号
11. user_id "val", --这⼀列直接取序列的下⼀值,⽽不⽤数据中提供的值
12. user_name "'Hi '||upper(:user_name)",--,还能⽤SQL函数或运算对数据进⾏加⼯处理
13. login_times terminated by ",", NULLIF(login_times='NULL') --可为列单独指定分隔符
14. last_login DATE "YYYY-MM-DD HH24:MI:SS"NULLIF (last_login="NULL") -- 当字段为"NULL"时就是 NULL
sql语句替换表中内容15. )
16. BEGINDATA --数据从这⾥开始
17. ,USER_ID,USER_NAME,LOGIN_TIMES,LAST_LOGIN
18. 1,1,Unmi,3,2009-1-5 20:34
19. 2,2,Fantasia,5,2008-10-15
20. 3,3,隔叶黄 莺,8,2009-1-2
21. 4,4,Kypfos,NULL,NULL
22. 5,5,不知 秋,1,2008-12-23
在 Oracle 数据库中,我们通常在不同数据库的表间记录进⾏复制或迁移时会⽤以下⼏种⽅法:
1. A 表的记录导出为⼀条条分号隔开的 insert 语句,然后执⾏插⼊到 B 表中
2. 建⽴数据库间的 dblink,然后⽤ create table B as select * from where ...,或 insert into B select * from where ...
3. exp A 表,再 imp 到 B 表,exp 时可加查询条件
4. 程序实现 select from A ..,然后 insert into B ...,也要分批提交
5. 再就是本篇要说到的 Sql Loader(sqlldr) 来导⼊数据,效果⽐起逐条 insert 来很明显
第 1 种⽅法在记录多时是个噩梦,需三五百条的分批提交,否则客户端会死掉,⽽且导⼊过程很慢。如果要不产⽣ REDO 来提⾼ insert into 的性能,就要下⾯那样做:
1. alter table B nologging;
2. insert /* +APPEND */ into B(c1,c2) values(x,xx);
3. insert /* +APPEND */ into B select * from A@dblink where .....;
好啦,前⾯简述了 Oracle 中数据导⼊导出的各种⽅法,我想⼀定还有更⾼明的。下⾯重点讲讲 Oracle 的 Sql Loader (sqlldr) 的⽤法。
在命令⾏下执⾏ Oracle 的 sqlldr 命令,可以看到它的详细参数说明,要着重关注以下⼏个参数:
userid -- Oracle 的 username/password[@servicename]
control -- 控制⽂件,可能包含表的数据
-------------------------------------------------------------------------------------------------------
log -- 记录导⼊时的⽇志⽂件,默认为 控制⽂件(去除扩展名).log
bad -- 坏数据⽂件,默认为 控制⽂件(去除扩展名).bad
data -- 数据⽂件,⼀般在控制⽂件中指定。⽤参数控制⽂件中不指定数据⽂件更适于⾃动操作
errors -- 允许的错误记录数,可以⽤他来控制⼀条记录都不能错
rows -- 多少条记录提交⼀次,默认为 64
skip -- 跳过的⾏数,⽐如导出的数据⽂件前⾯⼏⾏是表头或其他描述
还有更多的 sqlldr 的参数说明请参考:。
⽤例⼦来演⽰ sqlldr 的使⽤,有两种使⽤⽅法:
1. 只使⽤⼀个控制⽂件,在这个控制⽂件中包含数据
2. 使⽤⼀个控制⽂件(作为模板) 和⼀个数据⽂件
⼀般为了利于模板和数据的分离,以及程序的不同分⼯会使⽤第⼆种⽅式,所以先来看这种⽤法。数据⽂件可以是 CSV ⽂件或者以其他分割符分隔的,数据⽂件可以⽤ PL/SQL Developer 或者 Toad 导出,也可以。另外,⽤ Toad 还能直接⽣成包含数据的控制⽂件。
⾸先,假定有这么⼀个表 users,并插⼊五条记录:
1. create table users(
2. user_id number, --⽤户 ID
3. user_name varchar2(50), --⽤户名
4. login_times number, --登陆次数
5. last_login date --最后登录⽇期
6. )
1. insert into users values(1,'Unmi',3,sysdate);
2. insert into users values(2,NULL,5,to_date('2008-10-15','YYYY-MM-DD'));
3. insert into users values(3,'隔叶黄莺',8,to_date('2009-01-02','YYYY-MM-DD'));
4. insert into users values(4,'Kypfos',NULL,NULL);
5. insert into users values(5,'不知秋',1,to_date('2008-12-23','YYYY-MM-DD'));
第⼆种⽅式: 使⽤⼀个控制⽂件(作为模板) 和⼀个数据⽂件
1) 建⽴数据⽂件,我们这⾥⽤ PL/SQL Developer 导出表 users 的记录为 users_data.csv ⽂件,内容如下:
版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系QQ:729038198,我们将在24小时内删除。
发表评论