
平台论坛博客文库

› 论坛 › 数据库技术 › NoSQL技术 › MongoDB＋Hadoop构建MapReduce运算系统

[Hadoop&HBase] MongoDB＋Hadoop构建MapReduce运算系统 [复制链接]

中关村村草

小富即安

论坛徽章:: 0

电梯直达

1楼 [收藏(0)] [报告]

发表于 2012-02-23 19:11 |只看该作者 |倒序浏览

MongoDB＋Hadoop构建MapReduce运算系统

Hadoop 是一个开源的分布式的并行计算系统，其Map/Reduce 运算功能被广泛地应用在数据分析领域。mongo-hadoop 是一个将MongoDB 与Hadoop 相整合的开源工具。工具作者是10gen 的工程师，本文即是其作者对这一工具的思想及使用的介绍。

项目地址：https://github.com/mongodb/mongo-hadoop

文中关于为何不直接利用MongoDB的Map/Reduce 功能的回答：

必须Javascript语法（个人认为这个无所谓，JS通俗易懂）
Javascript引擎的实现导致一个实例只能运行一个Map/Reduce线程
除非使用Sharding，否则MongoDB无法进行真正的并行Map/Reduce运算
下面是完整slide：

The elephant in the room mongo db + hadoop

文库|博客

我是软件狂

丰衣足食

论坛徽章:: 0

2楼 [报告]

发表于 2012-02-24 17:03 |只看该作者

谢谢分享

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

返回列表

Chinaunix › 论坛 › 数据库技术 › NoSQL技术 › MongoDB＋Hadoop构建MapReduce运算系统