【讨论】海量数据分析之Hadoop（获奖名单已公布-2012-5-28）

bbjmmj

Gray1982 发表于 2012-05-13 00:30
回复 79# bbjmmj
这里说的不仅仅是网站需要，电商后台需要的海量日志加上日积月累需要的空间很多
业务需 ...

提取几个月前的日志，磁带库毫无疑问是最佳选择。
海量数据，无论多大容量，哪怕容量相当于整个互联网的数据总量，都没有使用HDFS的必要。HDFS仅仅是针对个别特定应用而做的设计，如果不是因为捆绑了MAP REDUCE，没人用它。MAP REDUCE实际上是一个方法，而不是一个应用。
HADOOP好坏几年前就已经决定了，现在被炒作，是因为个别厂商将HADOOP集成到集群NAS系统中去，这是个商业推销。HADOOP是APACHE协议的，所以才可以集成到商业存储中，这是根本原因，如果是GPL协议，市场根本不会理它。

bbjmmj

Gray1982 发表于 2012-05-13 00:32
回复 80# bbjmmj

如果PB级的数据，还经常用，那个更省钱？包括备份等数据维护。

肯定不是HDFS。

kns1024wh

回复 76# bbjmmj


    这个是要看架构中的需求的，IOE就一定是最好的， 开源的早就注定没有价值吗？

kns1024wh

回复 75# Gray1982


    需要修改的都是要和业务结合在一起的。

bbjmmj

kns1024wh 发表于 2012-05-13 16:23
回复 76# bbjmmj

不是说开源的不好，开源的商业炒作少，比较塌实。很少有商家会去炒作GPL协议的软件。

Gray1982

回复 85# bbjmmj


    那用什么，来个更好的

Gray1982

回复 84# bbjmmj


    成本·········

Gray1982

回复 87# kns1024wh


    我知道的，可以把现在用的贴上来不

bbjmmj

Gray1982 发表于 2012-05-13 23:29
回复 85# bbjmmj

HADOOP没火起来之前都用什么分析日志？就用那个。

bbjmmj

Gray1982 发表于 2012-05-13 23:30
回复 84# bbjmmj

你问到成本，我要反过来问一下效益，不只是企业的效益，而且还包括个人的效益。HADOOP因为有APACHE许可协议，可以并且已经打包在商业存储中，这也就意味着大家掌握的HADOOP维护管理技能注定被机器取代，工业时代的产业工人，就是这么丢掉饭碗的。这种形势对企业而言，同样也会产生损害，互联网企业将开始依赖商业存储技术，而这些企业有很多是吃过商业存储的亏才去玩开源的。
无论HADOOP能做什么，它都是可以用别的技术替代的东西，并且一定存在更优秀的替代者。