扫二维码与项目经理沟通
我们在微信上24小时期待你的声音
解答本文疑问/技术咨询/运营咨询/技术建议/互联网交流
本篇内容介绍了“Oracle expdp导出时的并行度设置方法是什么”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!
创新互联专注于企业成都全网营销推广、网站重做改版、义县网站定制设计、自适应品牌网站建设、H5场景定制、商城网站开发、集团公司官网建设、成都外贸网站建设、高端网站制作、响应式网页设计等建站业务,价格优惠性价比高,为义县等各大城市提供网站开发制作服务。
今天测试了下expdp在导出时是否加并行,以及如何加并行才能使导出效率最高,得出如下结论:
expdp 导出时加并行度参数设置:
parallel 并行度
filesize 单个文件大小的上限
totalsize 导出文件的总大小
满足下面的公式,可以保证导出效率最高:
(parallel-1) * filesize >= totalsize
下面是今天做测试时的数据:
这里有一张表44.93G,数据库服务器是24个CPU,SSD磁盘正常导出,导出文件大小为38.64G,导出时间2分2秒
expdp CPIC_PERF/CPIC_PERF directory=IMP_DIR tables= T_CLAIM_PART_TRA_B content=DATA_ONLY dumpfile=T_CLAIM_PART_TRA_B_20190227_PARALLEL.dump
然后我们对该导出操作加上不同的并行度进行测试:
第一次测试:执行1分11秒,导出了14个文件,从大小上可以明显看出,数据主要保存在前7个文件,后7个文件的数据量要小一些,原因是(8-1)*5=35G,没有达到导出总文件的大小,所以还需要增加数据文件来保存剩下的的数据,所以又增加了7个文件
expdp CPIC_PERF/CPIC_PERF directory=IMP_DIR tables= T_CLAIM_PART_TRA_B content=DATA_ONLY dumpfile=T_CLAIM_PART_TRA_B_20190227_PARALLEL%U.dump filesize=5G parallel=8 ;
第二次测试:执行1分10秒,导出了7个文件,实际上7个文件已经满足了总文件的大小,所以没有再增加新的数据文件,虽然比上一次测试在总时间上只减小了1秒,但是数据文件数要比之前少,这种情况要更优一些;
expdp CPIC_PERF/CPIC_PERF directory=IMP_DIR tables= T_CLAIM_PART_TRA_B content=DATA_ONLY dumpfile=T_CLAIM_PART_TRA_B_20190227_PARALLEL%U.dump filesize=6G parallel=8 ;
第三次测试:鉴于在网上查到的一些说法,我们做了一次测试来验证下:
网上的说法是parallel<=导出数据量/fileszie
按照网上的说法,我们做了新的设置
expdp CPIC_PERF/CPIC_PERF directory=IMP_DIR tables= T_CLAIM_PART_TRA_B content=DATA_ONLY dumpfile=T_CLAIM_PART_TRA_B_20190227_PARALLEL%U.dump filesize=6G parallel=4 ;
执行的时间是1分48秒,导出9个数据文件,可以发现,这种情况并非最优方案,所以网上的说法其实还需要进一步验证。
“Oracle expdp导出时的并行度设置方法是什么”的内容就介绍到这里了,感谢大家的阅读。如果想了解更多行业相关的知识可以关注创新互联网站,小编将为大家输出更多高质量的实用文章!
我们在微信上24小时期待你的声音
解答本文疑问/技术咨询/运营咨询/技术建议/互联网交流