免费注册 查看新帖 |

Chinaunix

广告
  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 2721 | 回复: 6
打印 上一主题 下一主题

海量数据提取问题,请大家帮忙 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2008-11-05 21:45 |只看该作者 |倒序浏览
ORACLE数据库,在A库中某表中大约有6000万的数据量,现准备从B库连接到A库中,按每30分钟提取数据增量, 那么通过什么样的链接方式到A库比较合理,我曾听说用DBLINK这种方式对A库系统有影响,还有人说长时间占用DBLINK会使DBLINK不稳定,那么同义词呢? 我不清楚该用什么方式好,考虑过高级复制,但是每月表名是变化的,每月重建又很方便,请大侠们给个解答。

论坛徽章:
0
2 [报告]
发表于 2008-11-05 21:50 |只看该作者
我不太清楚,好像有个叫数据泵的东东

论坛徽章:
0
3 [报告]
发表于 2008-11-06 09:23 |只看该作者
我查了下ORACLE数据泵,这个好像是转储数据用的,如果从B库连接到A库这种操作方式,这边是不是可行?还有没有更好的建议?

论坛徽章:
0
4 [报告]
发表于 2008-11-06 09:32 |只看该作者
表的数据总量不是问题,关键是每次增量是多少,这个是要考虑的
如果,增量不大的话,db_link没什么不可以的,只要设计好程序的逻辑就OK

论坛徽章:
0
5 [报告]
发表于 2008-11-06 12:13 |只看该作者
6000w数据量不算大,只要数据抽取时间间隔内增长的数据量是可控的,通过dblink抓取不会有大的问题。通过记录入库时间字段或者primary key来识别要抓取的新增数据。

论坛徽章:
0
6 [报告]
发表于 2008-11-06 21:00 |只看该作者
采用MV的fast更新即可,由于每月表名发生变化,调整也方便

论坛徽章:
1
丑牛
日期:2014-08-07 17:07:05
7 [报告]
发表于 2008-11-06 21:30 |只看该作者
提示: 作者被禁止或删除 内容自动屏蔽
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP