免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
楼主: fengzhanhai

[Spark] 大数据逐渐成为公司的重要的资产之一,问题是你能将资产变现吗? [复制链接]

zksfyz 该用户已被删除
发表于 2015-07-07 13:58 |显示全部楼层
提示: 作者被禁止或删除 内容自动屏蔽

论坛徽章:
18
2015亚冠之阿尔希拉尔
日期:2015-06-02 09:56:10数据库技术版块每日发帖之星
日期:2016-08-13 06:20:00数据库技术版块每日发帖之星
日期:2016-04-24 06:20:00数据库技术版块每日发帖之星
日期:2016-03-19 06:20:00数据库技术版块每日发帖之星
日期:2015-12-25 06:20:35数据库技术版块每日发帖之星
日期:2015-12-25 06:20:35数据库技术版块每日发帖之星
日期:2015-12-25 06:20:35数据库技术版块每日发帖之星
日期:2015-09-12 06:20:00数据库技术版块每日发帖之星
日期:2015-09-11 06:20:00ChinaUnix专家徽章
日期:2015-06-30 16:29:48ChinaUnix专家徽章
日期:2015-06-30 16:29:342015年中国系统架构师大会
日期:2015-06-29 16:11:28
发表于 2015-07-07 15:07 |显示全部楼层
1.关于大数据项目,您公司目前有计划实施吗?若贵公司已经计划实施大数据平台,最需要哪方面的资源支持?带来了哪些正面的影响?
我觉得这个东西吗,最主要的东西还是最重要的数据,现在好多人扯大数据,没有数据,你分析,什么东西。
2.在全民大数据时代,您认为大数据的机遇有哪些?又有哪些挑战?
大数据很火啊 发展也不错呗
3.在实施大数据项目中遇到了哪些问题?是如何保证数据的质量的,又是如何保证结果的准确性?
我算路过的吧,目前的分析软件是买的,质量什么的只能靠厂商了
4.针对贵公司的大数据平台都需要分析哪些类型的数据,在分析非结构化的数据时又使用了哪些神器?
我这里基本etl 之后都是结构的了,难点为知

论坛徽章:
10
CU大牛徽章
日期:2013-05-20 10:44:54数据库技术版块每日发帖之星
日期:2015-06-09 22:20:00IT运维版块每日发帖之星
日期:2015-06-05 22:20:00亥猪
日期:2014-08-23 14:52:27摩羯座
日期:2013-11-29 18:02:31CU十二周年纪念徽章
日期:2013-10-24 15:41:34CU大牛徽章
日期:2013-05-20 10:45:31CU大牛徽章
日期:2013-05-20 10:45:24CU大牛徽章
日期:2013-05-20 10:45:13综合交流区版块每日发帖之星
日期:2016-02-12 06:20:00
发表于 2015-07-07 18:46 |显示全部楼层
回复 10# devil3380
关于数据的整合,你们公司是使用企业级的解决方案还是开源技术~整合的具体思路和标准可以分享一些吗?
   

论坛徽章:
10
CU大牛徽章
日期:2013-05-20 10:44:54数据库技术版块每日发帖之星
日期:2015-06-09 22:20:00IT运维版块每日发帖之星
日期:2015-06-05 22:20:00亥猪
日期:2014-08-23 14:52:27摩羯座
日期:2013-11-29 18:02:31CU十二周年纪念徽章
日期:2013-10-24 15:41:34CU大牛徽章
日期:2013-05-20 10:45:31CU大牛徽章
日期:2013-05-20 10:45:24CU大牛徽章
日期:2013-05-20 10:45:13综合交流区版块每日发帖之星
日期:2016-02-12 06:20:00
发表于 2015-07-07 18:57 |显示全部楼层
回复 11# zksfyz
非常经典的一个案例,你刚刚说这些问题也是其他行业都在面临的一个问题,传统的IT架构和技术在面对海量数据处理分析时的确有点力不从心~尤其是在半结构化、非结构化数据的处理上存在短板~所以目前类似于NoSQL这类数据库才如火如荼的发展了起来。当然像刚才你举到的列子,建议可以研究一下hadoop或者spark这类大数据处理技术是否适用与你所处的行业,以上也许能够帮到你~谢谢

论坛徽章:
10
CU大牛徽章
日期:2013-05-20 10:44:54数据库技术版块每日发帖之星
日期:2015-06-09 22:20:00IT运维版块每日发帖之星
日期:2015-06-05 22:20:00亥猪
日期:2014-08-23 14:52:27摩羯座
日期:2013-11-29 18:02:31CU十二周年纪念徽章
日期:2013-10-24 15:41:34CU大牛徽章
日期:2013-05-20 10:45:31CU大牛徽章
日期:2013-05-20 10:45:24CU大牛徽章
日期:2013-05-20 10:45:13综合交流区版块每日发帖之星
日期:2016-02-12 06:20:00
发表于 2015-07-07 19:00 |显示全部楼层
回复 12# stay_sun
@stay_sun 呵呵,回答中规中矩~但缺乏实质性的见解、注水严重~~不过还是感谢您的参与stay_sun,亲~~

论坛徽章:
2
极客徽章
日期:2016-12-07 14:07:302017金鸡报晓
日期:2017-01-10 15:13:29
发表于 2015-07-08 11:26 |显示全部楼层
回复 13# fengzhanhai


  现在还是使用开源的多,大的不一定是最适合的。在企业管理中,没有一个最好的标准。我们也是在不断摸索,另外企业级的定制化和成本都是需要考虑的问题。

论坛徽章:
2
水瓶座
日期:2014-06-12 08:22:39IT运维版块每日发帖之星
日期:2015-08-05 06:20:00
发表于 2015-07-08 22:38 |显示全部楼层
1.关于大数据项目,您公司目前有计划实施吗?若贵公司已经计划实施大数据平台,最需要哪方面的资源支持?带来了哪些正面的影响?
      大数据项目,公司很早以前就已经实施了。最重要的是安全方面的支持吧,现在的安全方面问题很多,正面的影响,大数据的实施,让我们很多事情都有迹可循,能够以数据量来提示我们的生活,便捷我们的生活。

2.在全民大数据时代,您认为大数据的机遇有哪些?又有哪些挑战?
     物联网和数据挖掘。挑战依旧是安全和人们的信任度,安全不过关,我们是不会把自己的信息交给大数据平台的。

3.在实施大数据项目中遇到了哪些问题?是如何保证数据的质量的,又是如何保证结果的准确性?
     经常数据会丢失和受到入侵。数据质量只能通过算法来实现了。

4.针对贵公司的大数据平台都需要分析哪些类型的数据,在分析非结构化的数据时又使用了哪些神器?
     我们主要是做医疗方面的,所以对于人们的身体健康状况的数据比较分析的多。

论坛徽章:
18
2015亚冠之阿尔希拉尔
日期:2015-06-02 09:56:10数据库技术版块每日发帖之星
日期:2016-08-13 06:20:00数据库技术版块每日发帖之星
日期:2016-04-24 06:20:00数据库技术版块每日发帖之星
日期:2016-03-19 06:20:00数据库技术版块每日发帖之星
日期:2015-12-25 06:20:35数据库技术版块每日发帖之星
日期:2015-12-25 06:20:35数据库技术版块每日发帖之星
日期:2015-12-25 06:20:35数据库技术版块每日发帖之星
日期:2015-09-12 06:20:00数据库技术版块每日发帖之星
日期:2015-09-11 06:20:00ChinaUnix专家徽章
日期:2015-06-30 16:29:48ChinaUnix专家徽章
日期:2015-06-30 16:29:342015年中国系统架构师大会
日期:2015-06-29 16:11:28
发表于 2015-07-09 08:47 |显示全部楼层
回复 15# fengzhanhai


    我就想订下帖子   观点不清楚啊  不明确

论坛徽章:
10
CU大牛徽章
日期:2013-05-20 10:44:54数据库技术版块每日发帖之星
日期:2015-06-09 22:20:00IT运维版块每日发帖之星
日期:2015-06-05 22:20:00亥猪
日期:2014-08-23 14:52:27摩羯座
日期:2013-11-29 18:02:31CU十二周年纪念徽章
日期:2013-10-24 15:41:34CU大牛徽章
日期:2013-05-20 10:45:31CU大牛徽章
日期:2013-05-20 10:45:24CU大牛徽章
日期:2013-05-20 10:45:13综合交流区版块每日发帖之星
日期:2016-02-12 06:20:00
发表于 2015-07-09 12:48 |显示全部楼层
回复 18# stay_sun
呵呵~本话题本身立足点就是一个开放的话题,旨在探讨切磋大家在大数据应用领域遇到的一些问题及好的数据分析模型~
在笔者看来大数据技术本身就是一个跨多种学科的行业,所以我们的话题布局尽可能的也要宽泛一些,这样才有更多共同的话题~当然在本话题中我没有提到的,大家也可以发表自己的观点和不同的思路,只要你的观点能给大家带来一些参考价值和借鉴意义,我的目的也就达到了~

论坛徽章:
10
CU大牛徽章
日期:2013-05-20 10:44:54数据库技术版块每日发帖之星
日期:2015-06-09 22:20:00IT运维版块每日发帖之星
日期:2015-06-05 22:20:00亥猪
日期:2014-08-23 14:52:27摩羯座
日期:2013-11-29 18:02:31CU十二周年纪念徽章
日期:2013-10-24 15:41:34CU大牛徽章
日期:2013-05-20 10:45:31CU大牛徽章
日期:2013-05-20 10:45:24CU大牛徽章
日期:2013-05-20 10:45:13综合交流区版块每日发帖之星
日期:2016-02-12 06:20:00
发表于 2015-07-09 12:56 |显示全部楼层
回复 16# devil3380
不错的思路,适合的才是最好的~尤其是技术选型与团队能力要适配才是好的。开源不代表低劣,目前几乎所有的大数据解决方案都是在开源技术的基础之上实现的,包括最近热门的hadoop、spark技术都是来自开源社区~
目前国家也在号召安全、自主、可控,所以在当前形势之下走开源的道路也未必不是一个好的方向啊~
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP