免费注册	查看新帖 \|


平台论坛博客文库

› 论坛 › IT运维 › Hadoop和大数据技术 › mysql和HIVE实时同步

最近访问板块

发新帖

查看: 5898 | 回复: 2

上一主题

下一主题

[Hive] mysql和HIVE实时同步 [复制链接]

论坛徽章:: 1

IT运维版块每日发帖之星
日期:2015-08-25 06:20:00

电梯直达

跳转到指定楼层

1楼 [收藏(0)] [报告]

发表于 2014-01-16 12:38 |只看该作者 |倒序浏览

各位前辈

弟近日更换工作

但是新主管给了小弟一个考题

因公司mysql cluster与oracle RAC皆负担沉重

常常在简单的query下就出现error

新主管希望query能移转至HIVE上，其它仍保留在原处

现在要求我先做mysql cluster同步至HIVE

我下载了mysql-hadoop-applier

但是complie始终失败

后来发现到原来我不是第一个发现这个问题的人

http://www.adintellig.com/blog/118

小弟也试过sqoop，但是做不到新主管要求的实时同步

同步时大量的数据抄写也造成更多问题

请问前辈们

是否有其它解决方案可以达到mysql和HIVE实时同步?

论坛徽章:: 71

15-16赛季CBA联赛之同曦
日期:2018-08-23 15:41:42

辰龙
日期:2014-08-15 09:07:43

狮子座
日期:2014-06-03 13:55:33

亥猪
日期:2014-06-02 11:17:08

巨蟹座
日期:2014-05-06 10:02:03

午马
日期:2014-05-04 08:18:27

亥猪
日期:2014-04-29 11:11:32

技术图书徽章
日期:2014-04-24 15:51:26

技术图书徽章
日期:2014-04-17 11:01:53

辰龙
日期:2014-04-15 12:45:46

亥猪
日期:2014-04-11 09:06:23

射手座
日期:2014-04-01 15:28:10

2楼 [报告]

发表于 2014-01-16 15:14 |只看该作者

呵呵，你告诉他这个问题要月薪5W的人来解决。

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 1

IT运维版块每日发帖之星
日期:2016-02-06 06:20:00

3楼 [报告]

发表于 2016-02-03 15:12 |只看该作者

这个话说道点子上了。回复 2# zhaopingzi

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

发新帖

Chinaunix › 论坛 › IT运维 › Hadoop和大数据技术 › mysql和HIVE实时同步

北京盛拓优讯信息技术有限公司. 版权所有京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP