Hadoop的未来在哪里

cokeboL

1、MapReduce的主要应用领域在哪里？在哪些场合被取代可能性不高？
     主要应用在大数据处理、分析。新版本好像已经不再继续支持MapReduce了，性能相比Spark之类太差，被Spark取代几乎是必然了。
2、对比YARN和Mesos的优势和劣势，以及YARN框架未来的发展方向？
     Yarn和Mesos我都没怎么用，在hadoop几个技术群里聊，Mesos似乎更优秀，也是未来大势所趋的样子。
3、HDFS缺少哪些你需要的特性，或者你比较喜欢其哪一个特性，也可以谈谈您比较看好哪个存储系统，为什么？
     缺少的特性就是，我不喜欢java，希望能对python提供编程接口，虽然streaming可以使用各种语言处理大数据，但是文件系统相关的
     编程接口只支持java，也是很虐心。功能上，作为分布式文件系统，还好了，挺全面的没遇到什么缺的。喜欢的特性，当然是命令和shell
     很像，容易入门和使用
4、Hadoop从业者应该如何进行职业规划？
     个人觉得hadoop本身只有hdfs能持久，MR会逐渐被Spark取代，hdfs相关的业务，可能只是两大部分：一是运维， 二是存储相关的开发。
     这两个方向的iter自然需要去学习和实战相关知识。
     另外，各大行业数据相关的业务，如数据处理、分析的人员需求会更多些，而需要的专业知识和算法要求也更高些，可以在数据挖掘上多深入
     研究下。

cokeboL

回复 14# heguangwu


    忘记是hadoop原版还是cdh的某版本了，偶尔瞟到过一眼，不在继续支持是说不再继续改进或支持已有功能的bug之类，不是从功能里把MR去掉
    hadoop支持其他的我知道，就是因为支持spark storm，而且与他们相比，MR太鸡肋，所以没必要再用了