由大数据引发的概念潮，关于“大数据”你想聊点啥？

heguangwu

获奖详情：http://bbs.chinaunix.net/thread-4187747-1-1.html

话题背景：
大数据已经无处不在，无论你在哪个行业，开口必谈大数据。各位从事大数据相关工作的筒子，从最开始的DBMS、BI到后面大红大紫的分布式存储、NoSQL、NewSQL、MapReduce、Spark、BlinkDB，无论是在存储、分析、计算、甚至可视化方面，或多或少遇到过一些揪心的问题：有配置的问题，有代码开发的问题，甚至有的是版本兼容性的问题等。本次话题将集中于讨论大数据相关的问题。



讨论话题（包括但不限于）：
1. 遇到的比较头疼的问题是什么，怎么解决的（Google直接解决的免谈）？
2. 是否深入研究过大数据的某一个组件或工具，直接从源代码层次来解决问题？
3. 从什么渠道了解新的技术，SIGMOD、VLDB、Hadoop submit、spark submit或其它，这些新技术怎么应用到项目？
4. 分享自己学习大数据的一些经历

欢迎任选一个到多个话题畅所欲言。




讨论时间：2015年8月11日-2015年9月11日



活动奖励：
活动结束后将选取5名讨论精彩的童鞋，可任意选取以下经典技术图书一本。



奖品简介：

样章试读：人件  文前      人件  正文


样章试读：算法精解  文前         算法精解01-03


样章试读：算法心得：高效算法的奥秘   文前        算法心得：高效算法的奥秘  1-3


试读样章：NoSQL精粹 第一章      NoSQL精粹 第二章    NoSQL精粹  第三章


样章试读：设计原本 01        设计原本 02        设计原本 03



征集下期话题：
参与此话题的讨论的同学，有兴趣的可自选主题， 组织下期讨论活动。下期书单早曝光：
  《领域特定语言》   《 设计原本：计算机科学巨匠Frederick P. Brooks的反思（经典珍藏）》    《软件驱魔：调试和优化遗留代码的艺术》  《修改代码的艺术》  《Windows运行时编程权威指南.rar》

shenlanyouyu

新活动先支持一个。

chenxing2

大数据啊，能用上的公司很少......

heguangwu

大数据只是一个名词，何谓大数据，假设单机器处理能力10G，那么大于10G就是大数据
并不是说数据量大就一定是大数据，个人认为大数据的核心是Value，哪怕用excel分析也可以
当前的趋势是数据存储和分析代价越来越小，所以能保存的数据的广度和分析的深度都在扩大，之前处于成本考虑不保存分析的数据现在也开始作为一个参考的维度了
对企业而言，如何从更多的数据集分析出更有价值的东西才是他们关心的东西，即使是小企业有的也开始考虑了
回复 3# chenxing2


   

shenlanyouyu

我建议根据每一期的数据，大家自由发挥比较好，例如这一期可以讨论算法，软件管理，数据库。

王楠w_n

shenlanyouyu,这个建议很好，大家可以按照这个聊哈回复 5# shenlanyouyu


   

forgaoqiang

靠谱的活动 先支持下

zymh_zy

从什么渠道了解新的技术，SIGMOD、VLDB、Hadoop submit、spark submit或其它，这些新技术怎么应用到项目？

这些新技术一个都没了解过。。有点失败。。。。

heguangwu

可能你之前不是这个做这方面的东东，所以很正常
回复 8# zymh_zy


   

chenxing2

回复 4# heguangwu


    你这么一说，感觉我一直在从事大数据分析了

之前公司就做一个ERP，然后加了一套功能：
业绩分析、贡献度、销售构成、ABC分析、冻销分析、
商品趋势、销售速度、业绩趋势
百分率损益、


等等，有好多，之前客户公司是用excel做分析，现在我们提供软件分析，那我也是一直在做大数据处理了，话说我就写SQL的....

个人嚼的，怎么得用个聚类、推荐、语言识别、特征识别、朴素贝叶斯算法与交叉验证等之类的，才好玩...

话说回来，现在的大数据的一些开发方式及其一些开源框架，就现在的一大片公司的那点数据量根本用不上

用了也就是大炮打蚊子，没一点用，搞不好还不如传统手段来的高效。所以能用上个nosql数据库感觉都是超前一点的了