由大数据引发的概念潮，关于“大数据”你想聊点啥？

shenlanyouyu

我觉得算法在大数据应用中起着非常重要的作用。
算法是计算机科学领域最重要的基石之一，算法在大数据应用中起着非常重要的作用。
无论是大数据存储、大数据分析，算法都起着决定性的作用。 数据挖掘分析通过算法来更好地理解数据， 在数据上进行基于各种算法的计算，做进一步预测性分析，可以根据可视化分析和数据挖掘的结果做出一些预测性的判断，实现一些高级别数据分析的需求。用于挖掘的算法很复杂，并且计算涉及的数据量和计算量都很大，比较典型算法有用于聚类的K-Means、用于统计学习的SVM和用于分类的Naive Bayes，主要使用的工具有HadoopMahout等。

heguangwu

，没有算法就无法找到数据的价值，存储、分析只是基础和平台
回复 31# shenlanyouyu


   

shenlanyouyu

回复 32# heguangwu

    嗯，现在大数据很火，原因在于企业累积了海量数据，而且这些海量数据并没有被利用起来。而大数据真正价值在于对未来的预测，将大量数据收集起来进行挖掘分析，从而预测出未来会发生什么。大数据不过是对过往事实的强化，并没有跳出原有的盒子去真正创新。如果过分的依靠机械的进化而不是破坏性的创新。由于是对过往事实的强化，所以很容易将相关性误解成因果性，这无疑是非常可怕的。如果数据不全，导致错误的预测，不可避免地成为“黑天鹅事件”。
      数据挖掘分析通过算法来更好地理解数据，在数据上进行基于各种算法的计算，做进一步预测性分析。根据分析和数据挖掘的结果做出一些预测性的判断，实现一些高级别数据分析的需求。用于挖掘的算法很复杂，算法的设计很重要，一旦算法设计不合理，用于分析的数据样本数量不够，或者数据样本有误，数据挖掘的结果将导致错误的预测。因此大数据预测，选择正确的算法很重要。

lemoncandy

大数据现在到处都在说啊，可是有几个公司的数据量能够称得上是大数据呢，好多在我看，用excel就能搞定的，还非得说要搞大数据，就是个笑话啊

SeAL80s

我想聊聊大数据下的个人隐私安全，可是好像没人在意...

heguangwu

安全是一个很小的圈子，其实我也想聊这个，奈何不懂
回复 35# SeAL80s


   

wenhq

分享自己学习大数据的一些经历

个人的一点点经验，先把环境跑起来,hadoop。 然后会简单测试一些类似于hello world的小应用，接着看看hadoop 权威指南,因为在之前的实践中对理论技术的了解不够多，籍此能加深理解并能了解其中个味。接着就是做项目啦，没有项目的支持，对大数据的理解还是处于概念层的。比如跑一些etl。逐步的提搞，大数据的前提是java。对java的基础不能太差，还有就是JVM原理之类的，因为遇到问题的时候你有可能会看代码。不懂就傻xx了。。