hadoop 集群 稳定 版本
hadoop的集群似乎不错，安全性如何得到保证呢？这篇文章我也是似懂非懂，请教各位。 http://tech.it168.com/a2011/1208/1285/000001285780.shtml
by double_life - NoSQL技术 - 2011-12-12 13:01:09 阅读（2415） 回复（1）
做了一个kvm的hadoop集群 感觉装软件和集群管理比较麻烦 麻烦问一下，有没有什么开源软件，管理集群比较方便 比如 1.root帐号下安装软件 2.hadoop帐号下的scp拷贝和运行程序 等等的普通功能 是否有python的开源项目 可以使用？
目前有一套HPC集群，作业调度系统是基于SGE的，现在集群的IO存在瓶颈，（现在的集群共享文件还是传统的HPC集群共享文件方式，也就是通过NFS共享盘阵，实现集群共同读写）想做hadoop或者luster文件系统，但是有一个疑问，就是云计算的高性能计算资源如何去调度？是选择hadoop还是luster文件系统？
1、准备安装 1.1 系统简介 CentOS 是什么？ CentOS是一个基于Red Hat 企业级 Linux 提供的可自由使用的源代码企业级的 Linux 发行版本。每个版本的 CentOS 都会获得七年的支持（通过安全更新方式）。新版本的 CentOS 每两年发行一次，而每个版本的 CentOS 会定期（大概每六个月）更新一次，以便支持新的硬件。这样，建立一个安全、低维护、稳定、高预测性、高重复性的 Linux 环境。 CentOS（Community Enterprise Operating Sy...
本帖最后由 圣剑蓝骑士 于 2013-05-18 15:30 编辑 namanode是hadoop1 两个datanode是：hadoop2和hadoop3 启动后界面： 界面显示datanode和tasktracker已启动， 然而在hadoop2中却显示： 关闭hadoop显示为： 请问怎么回事
其实参看hadoop官方文档已经能够很容易配置分布式框架运行环境了，不过这里既然写了就再多写一点，同时有一些细节需要注意的也说明一下，其实 也就是这些细节会让人摸索半天。hadoop可以单机跑，也可以配置集群跑，单机跑就不需要多说了，只需要按照Demo的运行说明直接执行命令即可。这里 主要重点说一下集群配置运行的过程。 环境 7台普通的机器，操作系统都是Linux。内存和CPU就不说了，反正hadoop一大特点就是机器在多不在精。J...
── 分布式计算开源框架hadoop入门实践（二） 其实参看hadoop官方文档已经能够很容易配置分布式框架运行环境了，不过这里既然写了就再多写一点，同时有一些细节需要注意的也说明一下，其实 也就是这些细节会让人摸索半天。hadoop可以单机跑，也可以配置集群跑，单机跑就不需要多说了，只需要按照Demo的运行说明直接执行命令即可。这里 主要重点说一下集群配置运行的过程。 环境 7台普通的机器，操作系统都是Linux。内存和CP...
请教一下，hadoop集群使用3个数据副本吗？一般看来部署如果4台机器肯定没有问题，但是如果有10台，20台机器的集群，感觉丢数据的风险很大啊~特别是PC Server的磁盘，如果每台机器使用6-8块盘，20台机就160块，这样磁盘坏3台不同机器各坏1块及以上的硬盘，那么3个副本就要拼人品了。 不知各位怎么看这个问题。
请教一下，hadoop集群使用3个数据副本吗？一般看来部署如果4台机器肯定没有问题，但是如果有10台，20台机器的集群，感觉丢数据的风险很大啊~特别是PC Server的磁盘，如果每台机器使用6-8块盘，20台机就160块，这样磁盘坏3台不同机器各坏1块及以上的硬盘，那么3个副本就要拼人品了。 不知各位怎么看这个问题。
用hadoop搭建分布式存储和分布式运算集群 Filed under: 搜索, 配置, 开发 — 钟 子昌 @ 7:59 pm 1. 列出使用的机器 普通PC，要求： cpu: 750M-1G mem: >128M disk: >10G 不需要太昂贵的机器。 机器名： finewine01 finewine02 finewine03 将finewine01设为主节点，其它的机器为从节点。 2. 下载和生成 从这里checkout，我选择trunk http://svn.apache.org/repos/asf/lucene/hadoop/ 使用ant进行生成 3. 部署前的准备工作 在主节点...
