Oracle使用sqlldr导入多文件到多个表

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Oracle使用sqlldr导入多文件到多个表相关的知识,希望对你有一定的参考价值。

比如,有几个表的数据文件a.csv,b.csv。。。需要分别导入a表,b表。。。,但是要一次执行加载到库中,也就是说,只占用一个连接数,
--------------------
1.写多个ctl,同时用多个执行:
sqlldr userid=arena2/arena2@Oracle11 control=e:\sqlldr.ctl
。。。。。
这样会同时占用多个连接并行处理吧?
如果不会并行处理,该如何设置呢?
---------------------
2.我想只写一个ctl文件,应该如何写呢?
有人说把所有的数据csv写入一个csv,把第一列设置为标记,然后在
into table1 when XX
(column1 position(。。),column2)
into table2 when XX
(column1,column2)
只能这样吗?
--------------------
我就是想知道,有没有办法让执行是顺序执行的?也就是同一时间里只处理一个sqlldr,其它的要等它处理完,这样比较节省连接数。因为有很多张表。 算了,就你一个回答,给你吧。

一次只能导一个文件,但一个文件中的数据可以导入到多个表中!
写个试试:test.ctl ,data1.txt,data2.txt
load data
infile 'e:\data1.txt'
insert into table A
field terminated by ','
trailing nullcols(id,name)
infile 'e:\data2.txt'
insert into table B
field terminated by ','
trailing nullcols(NAME,AGE)

sqlldr user/pwd@servername control='e:\test.ctl'
不行我也没办法,我都是先全塞一个文件里一起导的
参考技术A 题主,问题解决了吗?有方法请发260711363@qq.com 谢谢

批量数据文件用sqlldr导数据到oracle中

    使用sqlload导文本数据到oracle中想必很多人多使用过,但是倘若有几百或者几千个数据文本,或者实时有文本数据产生。这种场景如何批量导入oracle呢,下面就来讲解下我处理的方式。

    1.shell脚本LoadData.sh如下

#!/bin/bash
data_dir=/home/bea/datasource/warn-log/dayflow  # 文本数据目录
data_dir_bak=/home/bea/datasource/warn-log/dayflow_bak
shell_dir=/home/bea/script
while [ 1 ]
do
cd $data_dir
if [ `pwd` == $data_dir ]
then
   filelist=`ls -rt | grep dayflow.log_.`  #数据文本文件名匹配
fi

#echo $filelist
cd $shell_dir
if [ `pwd` == $shell_dir ]
then
   for file in $filelist
   do
       date=`date "+%Y%m%d %H:%M:%S"`
       export LoadFileName=$data_dir"/"$file    #这个地方很重要,要加载变量到环境中
       echo "Time is $date ,开始导$LoadFileName数据"
       sqlldr user_1/[email protected]_db control=dayflow.log.ctl BAD=dayflow.log.bad
       echo "Time is $date ,$LoadFileName数据导入完毕"
       
       echo "开始备份文件$file"
       mv $LoadFileName $data_dir_bak
       echo "$file备份完毕"
   done
fi
done

这个地方最应该要注意的是

export LoadFileName=$data_dir"/"$file

这里将LoadFileName (导入oracle 的文本,绝对路径)这个变量 export到linux环境中,这样sqlload的控制文件就可以读到这个变量并进行导入

2.sqlldr控制文本dayflow.log.ctl

load data
CHARACTERSET AL32UTF8
infile ‘$LoadFileName‘
APPEND into table user_1.BIL_FLUX_HIGH_CUR
fields terminated by ‘|‘
trailing nullcols
(ACCS_NBR "TRIM(:ACCS_NBR)",
DATE_ID "TRIM(:DATE_ID)",
TOTAL_FLUX "TRIM(:TOTAL_FLUX)",
sys_date "sysdate")

请注意 infile ‘$LoadFileName‘,这里就是shell中 刚才export的变量,通过这种方式就可以以变量的形式传入文件名,那么批量导入也就是一个循环的操作。

本文出自 “改变世界” 博客,请务必保留此出处http://wongsong.blog.51cto.com/6040075/1906436

以上是关于Oracle使用sqlldr导入多文件到多个表的主要内容,如果未能解决你的问题,请参考以下文章

Oracle数据库sqlldr工具的使用

Oracle sqlldr导入之“MAXIMUM ERROR COUNT EXCEEDED”

oracle 外部表之 sqlldr 生成

Oracle SQLLDR - 使用参数文件指定多个日志、dsc、坏文件

sqlldr 向oracle导入csvtxt文件

oracle数据库sqlldr命令的使用