免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
楼主: pipihappy8888

[IaaS与数据中心] 【话题讨论】聊聊大数据时代的云架构:云计算与大数据真能双剑合璧吗? [复制链接]

论坛徽章:
2
IT运维版块每日发帖之星
日期:2016-03-19 06:20:00数据库技术版块每日发帖之星
日期:2016-07-05 06:20:00
发表于 2014-06-25 21:51 |显示全部楼层
1.云计算在IT技术架构中的位置究竟在哪里?什么是云架构?是在现有的IT技术架构中找到云计算的位置,还是为云计算建立一个全新的架构?云计算是否就是一个中间件?

如果IT是按应用、中间件、数据库、操作系统、虚拟化、服务器、网络、存储划为八层,那么云计算可以存在于每一层,云构架最大的特点是标准化、平台统一和扩展性,尤其是横向扩展,背后是大集群。现在的很多IT基础产品本身就支持传统构架,也支持云计算,甚至支持OPENSTACK,采用什么形式个人认为完全取决业务的规模和性质。

2.传统的存储备份系统往往横向扩展性不佳,并不适合针对海量用户的存储备份系统。而云存储在架构上能够实现Scale Out的扩展性,可以实现容量、性能随业务逐步平滑扩展。请举例说明你所知道的云存储。
云存储现阶段的横向扩展性更多是概念,如果多个IO敏感的应用在云存储可能是个灾难,如是不能有效解决IO延时或瓶颈,就没有任何意义了。IBM SVC的可以是一个解决方案,其实每个存储厂商都说有自己的云存储。

3.如果数据是财富,那么大数据就是宝藏,而云计算就是挖掘和利用宝藏的利器!没有强大的计算能力,数据宝藏终究是镜中花;没有大数据的积淀,云计算也只能是杀鸡用的宰牛刀。云计算和大数据到底是怎样的关系?谈谈您自己的理解。
个人认为云计算和大数据没有直接关系,目前来说,大数据还包括非结构化的数据,大数据更重要的在于如何梳理、组织、提取相关的数据并展现给需要的场景。网卡在传的一则故事,说近期有小伙专门应聘上海均价超4万的高档小区物业管理,自己配了一把扫描枪,每天就盯着小区垃圾堆,见条形码就扫描,晚上回家整理数据,得出此小区喝什么水,吃什么油,买什么衣服,整个小区的消费类偏好和品牌一清二楚,再形成报告卖给大公司,报告价值数十万,其实整个过程包括了大数据的形成、梳理、组织、提取和展现,似乎和云计算没有关系。

论坛徽章:
0
发表于 2014-06-26 09:10 来自手机 |显示全部楼层
到底什么是大数据还搞不懂,很多很多的据P级吗!

论坛徽章:
6
CU大牛徽章
日期:2013-05-20 10:43:41IT运维版块每日发帖之星
日期:2016-07-29 06:20:00IT运维版块每日发帖之星
日期:2016-01-27 06:20:00CU大牛徽章
日期:2013-05-20 10:44:16CU大牛徽章
日期:2013-05-20 10:44:0615-16赛季CBA联赛之广东
日期:2018-03-09 11:17:08
发表于 2014-06-26 11:58 |显示全部楼层
回复 21# bencyber


最后那个案例不错,但是我感觉算不上大数据吧,顶多就是数据采集+挖掘。
我觉得大数据应该是数据量达到单台机器在业务允许的时间和空间范围能无法处理和存储的时候,才能称之为大数据。


   

论坛徽章:
2
水瓶座
日期:2014-06-12 08:22:39IT运维版块每日发帖之星
日期:2015-08-05 06:20:00
发表于 2014-06-26 16:10 |显示全部楼层
        3.如果数据是财富,那么大数据就是宝藏,而云计算就是挖掘和利用宝藏的利器!没有强大的计算能力,数据宝藏终究是镜中花;没有大数据的积淀,云计算也只能是杀鸡用的宰牛刀。云计算和大数据到底是怎样的关系?谈谈您自己的理解。

       大数据就是一个问题集,云技术是目前解决大数据问题集最重要有效的手段。云计算提供了基础架构平台,大数据应用在这个平台上运行。企业视大数据为企业的生命、企业要想在同类行业中脱颖而出赢得市场,大数据的支持是必不可少的,大数据推动云计算的落地,云计算促进大数据的应用。

谈谈一点点区别吧:
      第一,在概念上两者有所不同,云计算改变了IT,而大数据则改变了业务。大数据必须有云作为基础架构,才能得以顺畅运营。
      第二,大数据和云计算的目标受众不同,云计算是卖给CIO的技术和产品,是一个进阶的解决方案。大数据的决策者是业务层。

论坛徽章:
10
CU大牛徽章
日期:2013-05-20 10:44:54数据库技术版块每日发帖之星
日期:2015-06-09 22:20:00IT运维版块每日发帖之星
日期:2015-06-05 22:20:00亥猪
日期:2014-08-23 14:52:27摩羯座
日期:2013-11-29 18:02:31CU十二周年纪念徽章
日期:2013-10-24 15:41:34CU大牛徽章
日期:2013-05-20 10:45:31CU大牛徽章
日期:2013-05-20 10:45:24CU大牛徽章
日期:2013-05-20 10:45:13综合交流区版块每日发帖之星
日期:2016-02-12 06:20:00
发表于 2014-06-27 11:02 |显示全部楼层
回复 1# pipihappy8888
大数据是未来的一个趋势,同样大数据的成功离不开高性能、高吞吐计算资源,而云计算可以保证这些资源的低成本拥有。所以说云计算应该是一个幸运儿,生逢其时~

   

论坛徽章:
0
发表于 2014-06-27 12:36 |显示全部楼层
虚拟化与私有云的话题。

论坛徽章:
10
CU大牛徽章
日期:2013-09-18 15:20:48程序设计版块每日发帖之星
日期:2016-07-21 06:20:00IT运维版块每日发帖之星
日期:2015-07-30 09:40:01技术图书徽章
日期:2014-10-14 16:00:43天蝎座
日期:2013-09-27 17:41:29CU大牛徽章
日期:2013-09-18 15:21:17CU大牛徽章
日期:2013-09-18 15:21:12CU大牛徽章
日期:2013-09-18 15:21:06CU大牛徽章
日期:2013-09-18 15:20:58每日论坛发贴之星
日期:2016-07-21 06:20:00
发表于 2014-07-01 11:01 |显示全部楼层
3.如果数据是财富,那么大数据就是宝藏,而云计算就是挖掘和利用宝藏的利器!没有强大的计算能力,数据宝藏终究是镜中花;没有大数据的积淀,云计算也只能是杀鸡用的宰牛刀。云计算和大数据到底是怎样的关系?谈谈您自己的理解。


现在的云计算,越来越变成高性能设备的迭加,而远离了低价高冗余的思想。因为设备厂商需要卖出价格。
大数据本身是高计算量的代名词,通过虚拟化带来的大数据,只能是中等性能的大数据,而不是原有大数据的本意了。
所以从个人经验来看,用现有的所谓的云计算让大数据的部署变的更容易,但成本却更加高昂了。
所以我更倾向于低成本硬件的堆叠。目前正在尝试用arm+dsp实现定长结构的大数据处理。

论坛徽章:
26
CU十二周年纪念徽章
日期:2013-10-24 15:41:34技术图书徽章
日期:2014-07-11 16:27:52辰龙
日期:2014-09-04 13:40:43白羊座
日期:2014-09-09 12:51:55双子座
日期:2014-09-26 11:00:042014年中国系统架构师大会
日期:2014-10-14 15:59:00子鼠
日期:2014-10-23 16:48:23巨蟹座
日期:2014-10-27 08:21:10申猴
日期:2014-12-08 10:16:282015年辞旧岁徽章
日期:2015-03-03 16:54:15NBA常规赛纪念章
日期:2015-05-04 22:32:03IT运维版块每日发帖之星
日期:2016-01-29 06:20:00
发表于 2014-07-02 09:48 |显示全部楼层
支持好话题。

论坛徽章:
36
子鼠
日期:2013-08-28 22:23:29黄金圣斗士
日期:2015-12-01 11:37:51程序设计版块每日发帖之星
日期:2015-12-14 06:20:00CU十四周年纪念徽章
日期:2015-12-22 16:50:40IT运维版块每日发帖之星
日期:2016-01-25 06:20:0015-16赛季CBA联赛之深圳
日期:2016-01-27 10:31:172016猴年福章徽章
日期:2016-02-18 15:30:3415-16赛季CBA联赛之福建
日期:2016-04-07 11:25:2215-16赛季CBA联赛之青岛
日期:2016-04-29 18:02:5915-16赛季CBA联赛之北控
日期:2016-06-20 17:38:50技术图书徽章
日期:2016-07-19 13:54:03程序设计版块每日发帖之星
日期:2016-08-21 06:20:00
发表于 2014-07-02 09:52 |显示全部楼层
国内这王八网速,真让人捉急

论坛徽章:
0
发表于 2014-07-02 10:39 |显示全部楼层
云计算适应了大数据的到来,期待他们有更大的发展,有更高程度的提升,支持
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

DTCC2021中国数据库技术大会

【数造未来】2021年10月18日-20日第十二届中国数据库技术大会
ITPUB、大会的会员您们好: 因目前国内疫情严峻,为响应北京市最新疫情防控要求,保障参会人员的健康和安全,组委会经协商决定:DTCC2021第十二届中国数据库技术大会延期至10月18日-20日(周一~周三)在北京国际会议中心举行,由此给各位带来的不便,敬请谅解!

大会官网
  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP