ChinaUnix.net
相关文章推荐:

hadoop secondary namenode配置

-bash-3.2$ hadoop namenode -format 13/11/19 09:58:22 INFO namenode.namenode: STARTUP_MSG: /************************************************************ STARTUP_MSG: Starting namenode STARTUP_MSG: host = mysql3/192.168.7.81 STARTUP_MSG: args = [-format] STARTUP_MSG: version = 1.0.3 STARTUP_MSG: build = https://svn.apache.org/repos/asf/hadoop/common/branches/branch-1.0 -r 1335192; compiled ...

by zhaopingzi - 分布式文件系统(FastDFS) - 2014-03-27 16:40:03 阅读(1333) 回复(3)

相关讨论

看文章hadoopnamenode,有几种高可用方案,drbd方式事冷备。有朋友事热备的成熟方案吗?

by soar_linux - NoSQL技术 - 2011-06-12 00:12:47 阅读(2506) 回复(0)

能不能把一台linux系统配置为master,而另一台windows配置为slaver?这样配置会影响hadoop的并行计算吗?

by kellenforever - NoSQL技术 - 2010-12-06 22:28:55 阅读(1650) 回复(0)

本帖最后由 其徐如林 于 2010-05-07 11:55 编辑 请问各位谁有HDFS的配置文档,发一份给我吧,我的QQ是287457235或者发到[email]287457235@qq.com[/email],我看了网上一些配置步骤,都不详细。。。。 谢谢各位了!

by 其徐如林 - NoSQL技术 - 2010-05-07 12:55:47 阅读(1664) 回复(1)

主附vlan一般用于一个网络段的情况,主vlan和子vlan间可以访问, 而子vlan之间是不能访问的。 [SwitchA]vlan 2 [SwitchA-vlan2]port ethernet 0/5 to ethernet 0/6 [SwitchA]vlan 3 [SwitchA-vlan3]port ethernet 0/7 to ethernet 0/8 [SwitchA]vlan 5 [SwitchA-vlan5]port ethernet 0/1 to ethernet 0/4 [SwitchA-vlan5]isolate-user-vlan enable ;vlan5是主vlan [SwitchA-vlan5]quit [SwitchA]isolate-user-vlan ...

VLAN网络管理

by txkss - 网络技术文档中心 - 2006-07-28 10:30:54 阅读(961) 回复(0)

本帖最后由 kaiserhui 于 2014-09-16 20:33 编辑 刚刚开始学习hadoop,但是手头只有两台机器可供搭建实验环境。搭建好后,访问50070端口观察整个HDFS,发现namenode只有一个,也就是配置文件slave中指定的那个。如图。 后来翻看了一下配置发文件,发现也就slave文件能指定datanode,所以讲namenode的主机名也加了进去,发现namenode节点也被加入了datanode集群。如图。hadoopM既是namenode也是datanode,hadoopS1是dat...

by kaiserhui - 分布式文件系统(FastDFS) - 2014-09-16 20:30:43 阅读(812) 回复(0)

hadoop配置文件配置项定义 0. 版本 0.19.2 1. hadoop cluster组成 1.1. HDFS 1.1.1 Name Node (1台) 1.1.2 secondary Name Node (1台, 可选) 1.1.3 Data Node (若干台) 1.2. MR 1.2.1 Master [JobTracker] (1台) 1.2.2 Slave [TaskTracker] (若干台) 2. 配置文件 2.1 hadoop-default.xml hadoop集群的默认配置, 通常不需要修改这个配置文件. 2....

by mshrat - Java文档中心 - 2009-09-06 12:05:02 阅读(2489) 回复(0)

hadoop-1.0.3的配置文件为: hadoop-1.0.3/conf/hadoop-metrics2.properties。我安装的Ganglia为版本为3.1,找到配置文件中for Ganglia 3.1 support。将需要监控的项目前面注释去掉,*.servers的配置为 239.2.11.71:8649,这个地址是Ganglia的广播地址,是固定的。 # for Ganglia 3.1 support *.sink.ganglia.class=org.apache.hadoop.metrics2.sink.ganglia.GangliaSink31 *.sink.ganglia.period=10 # default for supportsp...

by sdil - 集群和高可用 - 2014-03-16 16:26:24 阅读(1204) 回复(0)

mapred-site.xml里: mapred.output.compression.codec代表输出结果所使用的编解码器,也可以用gz或者bzip2或者lzo或者snappy等 我想问的问题是,这个值能否设置2个或多个,如这样设置: mapreduce.map.output.compress.codec com.hadoop.compression.lzo.LzoCodec,org.apache.hadoop.io.compress.SnappyCodec 谢谢

by zhaopingzi - Linux系统管理 - 2014-01-19 22:02:46 阅读(992) 回复(3)

[code] 本人安装配置hadoop2.2.0,并采用的是HA的方式。 安装完,测试访问等,正常 于是有安装了HBASE0.96.11,配置完后,发现有个现象: 直接用./start-hbase.sh启动,相关的HRegionServer无法带起来(后面会有相关日志) 如果先手工启动RegionServer,再启动hmater就正常了 截取相关主要配置如下: core-site.xml: fs.defaultFS hdfs://testcluster 注意在这个文...

by zhaopingzi - Hadoop和大数据技术 - 2014-02-28 13:25:01 阅读(3315) 回复(2)

1、准备安装 1.1 系统简介 CentOS 是什么? CentOS是一个基于Red Hat 企业级 Linux 提供的可自由使用的源代码企业级的 Linux 发行版本。每个版本的 CentOS 都会获得七年的支持(通过安全更新方式)。新版本的 CentOS 每两年发行一次,而每个版本的 CentOS 会定期(大概每六个月)更新一次,以便支持新的硬件。这样,建立一个安全、低维护、稳定、高预测性、高重复性的 Linux 环境。 CentOS(Community Enterprise Operating Sy...

by 迟到一千年 - Linux系统管理 - 2013-09-09 10:48:07 阅读(996) 回复(0)