【大话IT】互联网大数据应用：PowerLinux能巅覆x86性能吗？

fengzhanhai

回复 22# pipihappy8888
在可以预见的未来，大数据是大势所趋，目前正在从IT走向DT时代。cu的这个话题非常的棒~引领科技前沿，也证明了CU社区是一个以技术基因为根的社区，这也是我喜欢cu的地方，也是大多数一线工程师喜欢cu的地方~ 不罗嗦，不大谈理论，不搞华而不实的**，只求看得见摸得着的实实在在的东西~
哈哈，更要感谢cu有一个强大的team member@小尾巴鱼

jimn1982

回复 17# fengzhanhai


    支持你的光点，只是现在分布式的HADOOP集群的服务器成本有点高，低了处理不了大的数据

fengzhanhai

回复 25# jimn1982
不仅仅是投入成本，还有维护成本，人力成本，而且目前大数据库工程师奇缺导致要价奇高 恨不得自己从零开始做一个大数据菜鸟

Let_it_go

支持！

liuhuoxingkong

1、您在使用大数据分析时，碰到过哪些困扰和挑战？具体到硬件层面，您在系统性能、拓展性、稳定性、高可用性等方面是否碰到瓶颈, 数据库之间的连接等等？
没有从事大数据分析相关工作。在学习的过程中，感觉主要问题是计算能力和存储能力


3、在部署大数据方案时，您是如何进行IT硬件选型的，主要会考虑哪些因素？
基本就是系统性能、拓展性、稳定性、高可用性这几个性能进行对比，考虑实际的业务要求，判断哪一项的优先级更好，当然，价格和服务也是不可忽略的因素

4、对于IBM推出的上述大数据方案，您是否会考虑迁移测试？为什么？
公司暂时没有迁移计划，由于长时间的数据积累，成本是很大的，而且暂时又没有绝对必要的理由

stay_sun

1、您在使用大数据分析时，碰到过哪些困扰和挑战？具体到硬件层面，您在系统性能、拓展性、稳定性、高可用性等方面是否碰到瓶颈, 数据库之间的连接等等？
大数据方面的运维很麻烦，在稳定性方面很揉一出问题。因为hadoop的技术应用不多。
2、为提高Hadoop、NoSQL、MongoDB的性能，您一般会采用什么样的方法？现有的方法还存在哪些不足？
分布式集群部署 分析系统
3、在部署大数据方案时，您是如何进行IT硬件选型的，主要会考虑哪些因素？
目前没有选型过
4、对于IBM推出的上述大数据方案，您是否会考虑迁移测试？为什么？
可以测试 迁移就得用过之后才知道

Darren_Guo

1、您在使用大数据分析时，碰到过哪些困扰和挑战？具体到硬件层面，您在系统性能、拓展性、稳定性、高可用性等方面是否碰到瓶颈, 数据库之间的连接等等？
答：主要的困扰是大数据的及时处理，对于巨大的数据流，怎样高效的将数据流引入到自己的系统中并进行分析。系统的性能是一个很大的问题，面对海量的数据，对系统的性能要求是很苛刻的。
2、为提高Hadoop、NoSQL、MongoDB的性能，您一般会采用什么样的方法？现有的方法还存在哪些不足？
答：硬件架构固定后，主要是优化系统。这个方法的瓶颈最后还是硬件设备的限制。
3、在部署大数据方案时，您是如何进行IT硬件选型的，主要会考虑哪些因素？
答：主要考虑硬件的扩展性和价格，因为大数据需要的硬件设备会相对较多，价格是很重要的因素。
4、对于IBM推出的上述大数据方案，您是否会考虑迁移测试？为什么？
答：在新系统上可能会考虑，老系统考虑到迁移的问题一般不会考虑。

help01

1、您在使用大数据分析时，碰到过哪些困扰和挑战？具体到硬件层面，您在系统性能、拓展性、稳定性、高可用性等方面是否碰到瓶颈, 数据库之间的连接等等？
在使用大数据分析时，遇到的一个困扰就是如何确定数据的边界。虽然大数据是要有海量的基础数据为支撑，但就算是海也有边界，如何确定这个边界其实没有定论，关键还是要实施者自己来把控。
具体到硬件层面，在拓展数据库服务器时，确保新加入数据库的稳定和性能也是难点之一。尤其当存在不同种类数据库时，在稳定性以及数据库之间互联方面需要加以注意。

2、为提高Hadoop、NoSQL、MongoDB的性能，您一般会采用什么样的方法？现有的方法还存在哪些不足？
为提高性能，从硬件上来讲我会增加服务器的内存，并且考虑固态硬盘。
这些方法能一定程度上提升Hadoop、NoSQL或者MongoDB性能，但是提升空间有限，毕竟不可能无限制地购买内存和更换硬盘。而且也会受到系统架构的制约。

3、在部署大数据方案时，您是如何进行IT硬件选型的，主要会考虑哪些因素？
CPU通常考虑四核低功耗CPU，包括低功率的电源配置，能够支撑八核心低功耗设备。
两个六核处理器（6核12线程），可支持96个基本的虚拟机（VM），最大支持96 GB 的内存。
利用闪存驱动器启动服务器管理程序，将来可以考虑把操作系统和一些小型的服务器应用，如LAMP放到闪存当中运行。

4、对于IBM推出的上述大数据方案，您是否会考虑迁移测试？为什么？
暂时还不会考虑迁移测试，因为系统目前运行稳定，而且没有严重的性能瓶颈。