ChinaUnix.net
相关文章推荐:

hadoop日志处理

hadoop 是Google MapReduce 的一个Java实现。MapReduce是一种简化的分布式编程模式,让程序自动分布到一个由普通机器组成的超大集群上并发执行。就如同java程序员可以不考虑内存泄露一样, MapReduce的run-time系统会解决输入数据的分布细节,跨越机器集群的程序执行调度,处理机器的失效,并且管理机器之间的通讯请求。这样的模式允许程序员可以不需要有什么并发处理或者分布式系统的经验,就可以处理超大的分布式系统得资源。...

by xpjjy - Java文档中心 - 2009-01-09 16:47:36 阅读(1148) 回复(0)

相关讨论

1.解压 [color="#555555"]1 tar -zvxf hadoop-0.16.1.tar.gz 同时设置环境变量 [color="#555555"]1 2 3 4 5 6 7 8 9 10 11 12 13 14 # vi /etc/profile JAVA_HOME=/usr/local/jrockit export JAVA_HOME PATH=$PATH:$JAVA_HOME/bin export PATH CLASSPATH=.:$JAVA_HOME/lib:$JAVA_HOME/jre/lib export CLASSPATH hadoop_HOME=/usr/local/hadoop export hadoop_HOME hadoop_LOG_DIR=/var/log/hadoop export hadoop_LOG_DIR hadoop_...

by 剑心通明 - BSD文档中心 - 2008-03-23 20:47:00 阅读(1630) 回复(0)

:mrgreen: :mrgreen: :mrgreen:

by SunGod - 站务交流 - 2009-07-01 11:34:16 阅读(1140) 回复(4)

[color="#993300"]一、简要介绍 这里先大致介绍一下hadoop. 本文大部分内容都是从官网 [color="#009933"]hadoop 上来的。其中有一篇 [color="#009933"]介绍HDFS的pdf文档 ,里面对hadoop介绍的比较全面了。我的这一个系列的hadoop学习笔记也是从 [color="#009933"]这里 一步一步进行下来的,同时又参考了网上的很多文章,对学习hadoop中遇到的问题进行了归纳总结。 言归正传,先说一下hadoop的来龙去脉。谈到hadoop就...

by xiaowei - 存储文档中心 - 2008-10-24 16:38:53 阅读(1227) 回复(0)

[color="#993300"]一、简要介绍 这里先大致介绍一下 hadoop . 本文大部分内容都是从官网 [color="#009933"]hadoop 上来的。其中有一篇 [color="#009933"]介绍HDFS的pdf文档 ,里面对hadoop介绍的比较全面了。我的这一个系列的hadoop学习笔记也是从 [color="#009933"]这里 一步一步进行下来的,同时又参考了网上的很多文章,对学习hadoop中遇到的问题进行了归纳总结。 言归正传,先说一下hadoop的来龙去脉。谈到hadoop就不...

by 剑心通明 - BSD文档中心 - 2008-03-23 20:46:25 阅读(983) 回复(0)

hadoop配置文件配置项定义 0. 版本 0.19.2 1. hadoop cluster组成 1.1. HDFS 1.1.1 Name Node (1台) 1.1.2 Secondary Name Node (1台, 可选) 1.1.3 Data Node (若干台) 1.2. MR 1.2.1 Master [JobTracker] (1台) 1.2.2 Slave [TaskTracker] (若干台) 2. 配置文件 2.1 hadoop-default.xml hadoop集群的默认配置, 通常不需要修改这个配置文件. 2....

by mshrat - Java文档中心 - 2009-09-06 12:05:02 阅读(2486) 回复(0)

hadoop技术交流群:33152212

by Aquester - C/C++ - 2009-06-12 14:54:07 阅读(1576) 回复(1)

hadoop技术交流群:33152212

by Aquester - 存储备份 - 2009-06-12 14:48:48 阅读(1234) 回复(0)

hadoop技术交流群:60534259 [ 本帖最后由 Aquester 于 2009-11-23 15:58 编辑 ]

by Aquester - 初创企业IT架构选型 - 2010-04-15 20:33:55 阅读(2259) 回复(1)

hadoop技术交流群:60534259 [ 本帖最后由 Aquester 于 2009-11-23 15:55 编辑 ]

by Aquester - IT职业生涯 - 2009-11-28 20:52:15 阅读(2121) 回复(3)

hadoop技术交流群:33152212

by Aquester - Java - 2009-06-12 14:41:07 阅读(1398) 回复(0)