百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术教程 > 正文

sqludr2和sqlldr详解

mhr18 2024-12-29 00:02 40 浏览 0 评论

大家好,我是RomMr,一个乐于分享的it男!

  1. sqluldr2介绍

sqlulr2是一款Oracle数据快速导出工具,包含32、64位程序,sqluldr2在大数据量导出方面速度超快,能导出亿级数据为excel、txt、csv等文件,另外它的导入速度也非常快。

  1. sqluldr的使用

使用sqluldr2之前需要先安装,然后设置好环境变量即可开始使用,可以使用 sqluldr2 –-help 查看帮助

  1. sqluldr数据导出

3.1、常规导出

sqluldr2 user_name/password@ip:port/server_name charset=utf8 table=table_name field=”|” query=”select * from  Table_name” file=path/file_name log=log_name record=” |0x0a”

3.2、参数介绍

head={yes|no} 是否输出表头

charset=字符集 输出字文件的字符集

table=table_name 指定导入目标表的名称(即默认生成的ctl中导入表的名称,注意=右边不能有空格)

field=“” 设置导出文件的字段间的分割符

record=“” 设置导出文件数据行的结束符(

回车=0x0d,换行=0x0a,TAB键=0x09,|=0x7c,&=0x26,双引号=0x22,单引号=0x27)

query={语句|.sql} 设置导出条件,可以是语句,也可以是.sql文件 例:query=a.sql

mode={truncate|insert|append|replace} 导入默认选择(这个也是决定生成ctl文件中导入的模式)

bacth={yes|no} 是否把大表输出到多个文件中,可以按行数rows= ,或者size= (MB)来分割文件,多个文件名可按照下表来生成:

file=file_name 设置导出文件名(当文件名以.gz结尾时,会直接将记录以GZIP的格式压缩,适用于进行归档)

text=(mysql、csv、oraclelines等) 导出类型

parameter=参数文件 从文件中读取命令选项

trace= 设置10046时间追踪

log=logfile 设置日志文件可以使用前缀加+模式,输入到同一个日志文件

ctl=ctl_name 设置控制文件名

  1. sqlldr使用

4.1、常规导入

sqlldr useid/password control=ctl_file log=log_file date=date_file ERRORS=0 ROWS=50000 readsize=214747364 bindsize=214747364

4.2参数介绍

errors 允许的错误记录数,超过则终止任务(默认50)

rows 设置加载多少条commit一次,该参数受bindsize参数限制,如果每行实际占用大小超出bindsize最大可用值,则rows自动降低达到bindsize

readsize 缓冲区大小,默认值:1048576,单位字节,最大不超过20M,该参数仅当从数据文件读取时有效

bindsize 为绑定数组指定的最大可用空间,用来存贮一次读取的rows的记录,该值不能太小,至少要存放一条逻辑记录,但设置太大也没什么作用,每次提交记录缓冲区的大小,默认值256000

log 日志

control 控制文件(包含表结构以及一些导入参数,导出是默认生成)

data 数据文件

parallel={true|false} 设置并发,默认false

  1. sqluldr2和sqlldr使用注意事项

5.1、sqluldr2使用

5.1.1、sqluldr2在使用时要实现确定到field参数的值,防止在导入过程中因为字段内容中有所使用的分割符导致导入出错 例:导出内容中有“#” 在field参数则不能使用“#”来作为分割符

5.1.2、sqluldr2在使用时最好确定导入的模式(insert、append等)来减少后面修改ctl文件的麻烦

5.1.3、sqluldr2导出是会自动生成一个.ctl文件,如果不是使用ctl参数则文件名默认为default.ctl

5.2、sqlldr使用

5.2.1、sqlldr在导入时会把错误数据生成一个.bad文件,可以查词问价来确定没有导入的数据

5.2.2、sqlldr导入时要确定数据文件和控制文件的读写权限,若无权限,会报sql*loader-522错误

希望大家能多多支持,点赞转发,有数据库相关问题也可以留言私信,大家一块讨论!

相关推荐

C++开发必知的内存问题及常用的解决方法-经典文章

1.内存管理功能问题由于C++语言对内存有主动控制权,内存使用灵活和效率高,但代价是不小心使用就会导致以下内存错误:omemoryoverrun:写内存越界odoublefree:同一块内...

缓存用不好,系统崩得早!10条军规让你成为缓存高手

凌晨三点,我被电话惊醒:“苏工!首页崩了!”监控显示:缓存命中率0%,数据库QPS10万+,线程阻塞2000+。根本原因竟是同事没加缓存!不会用缓存的程序员,就像不会刹车的赛车手——...

彻底搞清楚内存泄漏的原因,如何避免内存泄漏,如何定位内存泄漏

作为C/C++开发人员,内存泄漏是最容易遇到的问题之一,这是由C/C++语言的特性引起的。C/C++语言与其他语言不同,需要开发者去申请和释放内存,即需要开发者去管理内存,如果内存使用不当,就容易造成...

Java中间件-Memcached(Java中间件大全)

一、知识结构及面试题目分析缓存技术的大规模使用是互联网架构区别于传统IT技术最大的地方,是整体高并发高性能架构设计中是重中之重的关键一笔,也是互联网公司比较偏好的面试题目。按照在软件系统中所处位置...

linux内存碎片防治技术(linux内存碎片整理)

推荐视频:90分钟了解Linux内存架构,numa的优势,slab的实现,vmalloc原理剖析Linux内核内存分配与回收Linuxkernel组织管理物理内存的方式是buddysystem(伙...

Redis主从架构详解(redis主从配置详细过程)

Redis主从架构搭建Redis主节点配置创建主节点目录(/opt/redis-master),复制redis.conf到该目录下,redis.conf配置项修改#后台启动daemonizeyes...

揭开CXL内存的神秘面纱(内存c1)

摘要:现代数据中心对内存容量的高需求促进了内存扩展和分解方面的多条创新线,其中一项获得极大关注的工作是基于ComputeeXpressLink(CXL)的内存扩展。为了更好地利用CXL,研究人员建...

一文彻底弄懂 TPS RPS QPS(tps cps)

以下是关于RPS、QPS、TPS的核心区别与关联的总结,结合实际场景和优化建议:一、核心定义与区别RPS:RequestsPerSecond每秒请求数客户端到服务器的完整请求数量Web服务...

用Redis的“集合”找出你和朋友的“共同关注”

你是不是在刷抖音、微博、小红书的时候,常常会看到这样的提示:“你和XXX有共同关注的博主/朋友”?或者当你关注了一个新的明星,系统会推荐“你的朋友YYY也关注了这位明星”?这个看似简单的功能背后,其实...

WOT2016彭哲夫:科班出身开发者对运维人员的期许

“运维与开发”是老生常谈的话题,前几天和一个运维人聊天,TA说一些公司运维岗位都不公开招聘了,这让众多运维人员情何以堪?是运维的岗位真的饱和了?是找到合适的运维人才难?还是有这样那样的因素?带着这些疑...

Java程序员最常用的20%技术总结(java程序员要掌握什么)

我听说编程语言,经常使用的是其中20%的技术。在Java这门语言中,这20%包括哪些内容?找到一份Java初级程序员的工作,有哪些是必须掌握的,有哪些是可以现学现卖的?一个完整的Javaweb项目,有...

秒杀系统实战(四)| 缓存与数据库双写一致性实战

前言微笑挖坑,努力填坑。————已经拥有黑眼圈,但还没学会小猪老师时间管理学的蛮三刀同学本文是秒杀系统的第四篇,我们来讨论秒杀系统中「缓存热点数据」的问题,进一步延伸到数据库和缓存的...

头条评论精灵翻牌子(头条评论精灵翻牌子怎么弄)

关于“头条评论精灵翻牌子”功能,这通常是指平台通过算法或运营手段,将用户的优质评论随机或定向推送到更显眼的位置(如信息流顶部、独立曝光位等),以提升互动率和用户参与感。以下是详细解析和建议:一、功能理...

15个程序员们都应该知道的大模型高级提示词指令模板和示例

作为程序员你如何写大模型指令?你写的指令是不是更专业呢?下面是15个程序员使用的专业的大模型指令,如果早知道可以能节省你很多时间。这些指令可以用在chatgpt,deepseek等大模型。1.一键...

MyBatis-Plus内置的主键生成策略有大坑,要注意!

昨天小伙伴使用Mybaits-Plus开发的项目线上(集群、K8S)出现了主键重复问题,其报错如下:Mybatis-Plus启动时会通过com.baomidou.mybatisplus.core.to...

取消回复欢迎 发表评论: