免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
楼主: pipihappy8888

[IaaS与数据中心] 【话题讨论】聊聊大数据时代的云架构:云计算与大数据真能双剑合璧吗? [复制链接]

论坛徽章:
5
丑牛
日期:2014-01-21 08:26:26卯兔
日期:2014-03-11 06:37:43天秤座
日期:2014-03-25 08:52:52寅虎
日期:2014-04-19 11:39:48午马
日期:2014-08-06 03:56:58
发表于 2014-06-24 15:03 |显示全部楼层
感觉阿里云就像是一个网盘
阿里盘
回复 5# 2009532140


   

论坛徽章:
0
发表于 2014-06-24 15:31 |显示全部楼层
   现在的云大部分都和虚拟技术结合起来,也有人认为没有虚拟技术,就没有云的概念。抛开概念和炒作,个人觉得云带给运维人员的优势就是架构扩展性强,资源可以重复利用,减少硬件的投入。另外经过和多个私有云和公有云建设机构的合作,感觉现在的所谓的云实际上是网盘和虚拟机的结合体,还远远达不到云的概念。
   纯属个人意见,不一定正确

论坛徽章:
0
发表于 2014-06-24 17:23 |显示全部楼层
跑步支持!

论坛徽章:
71
15-16赛季CBA联赛之同曦
日期:2018-08-23 15:41:42辰龙
日期:2014-08-15 09:07:43狮子座
日期:2014-06-03 13:55:33亥猪
日期:2014-06-02 11:17:08巨蟹座
日期:2014-05-06 10:02:03午马
日期:2014-05-04 08:18:27亥猪
日期:2014-04-29 11:11:32技术图书徽章
日期:2014-04-24 15:51:26技术图书徽章
日期:2014-04-17 11:01:53辰龙
日期:2014-04-15 12:45:46亥猪
日期:2014-04-11 09:06:23射手座
日期:2014-04-01 15:28:10
发表于 2014-06-24 17:26 |显示全部楼层
谁给普及一下,啥叫云?

论坛徽章:
0
发表于 2014-06-24 17:32 |显示全部楼层
zhaopingzi 发表于 2014-06-24 17:26
谁给普及一下,啥叫云?

云是指停留大气层上的水滴或瓦斯或冰晶胶体的集合体。云是地球上庞大的水循环的有形的结果。太阳照在地球的表面,水蒸发形成水蒸气,一旦水汽过饱和,水分子就会聚集在空气中的微尘(凝结核)周围,由此产生的水滴或冰晶将阳光散射到各个方向,这就产生了云的外观。

论坛徽章:
71
15-16赛季CBA联赛之同曦
日期:2018-08-23 15:41:42辰龙
日期:2014-08-15 09:07:43狮子座
日期:2014-06-03 13:55:33亥猪
日期:2014-06-02 11:17:08巨蟹座
日期:2014-05-06 10:02:03午马
日期:2014-05-04 08:18:27亥猪
日期:2014-04-29 11:11:32技术图书徽章
日期:2014-04-24 15:51:26技术图书徽章
日期:2014-04-17 11:01:53辰龙
日期:2014-04-15 12:45:46亥猪
日期:2014-04-11 09:06:23射手座
日期:2014-04-01 15:28:10
发表于 2014-06-24 17:43 |显示全部楼层
回复 15# kkddkkdd22


    不觉明厉

论坛徽章:
71
15-16赛季CBA联赛之同曦
日期:2018-08-23 15:41:42辰龙
日期:2014-08-15 09:07:43狮子座
日期:2014-06-03 13:55:33亥猪
日期:2014-06-02 11:17:08巨蟹座
日期:2014-05-06 10:02:03午马
日期:2014-05-04 08:18:27亥猪
日期:2014-04-29 11:11:32技术图书徽章
日期:2014-04-24 15:51:26技术图书徽章
日期:2014-04-17 11:01:53辰龙
日期:2014-04-15 12:45:46亥猪
日期:2014-04-11 09:06:23射手座
日期:2014-04-01 15:28:10
发表于 2014-06-24 17:52 |显示全部楼层
本帖最后由 zhaopingzi 于 2014-06-24 17:52 编辑

云计算和大数据是一对双胞胎,二者也是相辅相生:
有了大数据,它就可以挖掘云计算里机会,同时大数据挖掘处理需要云计算作为平台。
云计算将计算资源作为服务,支撑着大数据的挖掘
云计算与大数据结合将可能成为人类认识事物的新的工具,提高各个方面的决策水平将云计算和大数据的结合

论坛徽章:
6
CU大牛徽章
日期:2013-05-20 10:43:41IT运维版块每日发帖之星
日期:2016-07-29 06:20:00IT运维版块每日发帖之星
日期:2016-01-27 06:20:00CU大牛徽章
日期:2013-05-20 10:44:16CU大牛徽章
日期:2013-05-20 10:44:0615-16赛季CBA联赛之广东
日期:2018-03-09 11:17:08
发表于 2014-06-24 18:16 |显示全部楼层
1.云计算在IT技术架构中的位置究竟在哪里?什么是云架构?是在现有的IT技术架构中找到云计算的位置,还是为云计算建立一个全新的架构?云计算是否就是一个中间件?
  云计算是个商业化的概念,真正核心部分就是后面大型集群和虚拟化(有很多小公司没用到虚拟化)做支撑。其实我觉得吧,云计算就是利用各种技术把计算,存储,网络等作为服务提供给第三方使用,从而产生经济效益。第三方可以按需购买云计算服务提供商的服务。比方说AWS,阿里云的计算服务,七牛的存储服务,新浪的PaaS等。如果你自己想运营一个网站,自己买服务器,自己组网,找机房托管,成本一算下来可能就很高了,买云计算服务你可能就能节省很多米,对于中小型企业还是不错的,各种服务的运行维护都是由提供商自己解决,你在这方面下很多工夫了,多余的时间和精力就可以专注于你的业务。
  现在国内大多数IaaS提供商都是用OpenStack啥开源软件的,PaaS则有CloudFoundry,你可以把这些软件看成是一个很复杂的应用系统,集成了虚拟化管理,系统监控,资源管理,身份验证等服务应用系统。

2.传统的存储备份系统往往横向扩展性不佳,并不适合针对海量用户的存储备份系统。而云存储在架构上能够实现Scale Out的扩展性,可以实现容量、性能随业务逐步平滑扩展。请举例说明你所知道的云存储。
  前段时间听七牛的云存储比较多,其实阿里,盛大等大型公司都有云存储。只要你愿意你也可以弄个云存储服务,比如搞个redis或mysql集群,投入一些昂贵的硬件,然后提供一些api,搞个计费系统,你也可以来卖服务了。
3.如果数据是财富,那么大数据就是宝藏,而云计算就是挖掘和利用宝藏的利器!没有强大的计算能力,数据宝藏终究是镜中花;没有大数据的积淀,云计算也只能是杀鸡用的宰牛刀。云计算和大数据到底是怎样的关系?谈谈您自己的理解。
  现在很多的很多数据挖掘算法都是迭代式的,有时候需要扫描所有的数据,才能得出结果,这个就需要强大的计算能力,在有效的时间和空间范围内计算出结果,一个不行,上10个,100个。。。
  数据是输入,云计算是个强大的数据处理设备(也可以看成一个强大的计算机,组成这个计算机的是很多小型机器),输出的就是结果。

论坛徽章:
18
卯兔
日期:2013-09-27 17:41:0615-16赛季CBA联赛之佛山
日期:2016-07-09 17:34:45操作系统版块每周发帖之星
日期:2015-12-02 15:01:04IT运维版块每日发帖之星
日期:2015-12-02 06:20:00IT运维版块每日发帖之星
日期:2015-10-07 06:20:00IT运维版块每日发帖之星
日期:2015-10-03 06:20:00IT运维版块每日发帖之星
日期:2015-10-01 06:20:00羊年新春福章
日期:2015-04-01 17:56:06拜羊年徽章
日期:2015-04-01 17:56:062015年迎新春徽章
日期:2015-03-04 09:49:452015年辞旧岁徽章
日期:2015-03-03 16:54:15天秤座
日期:2015-01-14 06:39:28
发表于 2014-06-24 22:25 |显示全部楼层
回复 18# craaazy123


    学习了,谢谢分享

论坛徽章:
42
19周年集字徽章-周
日期:2019-10-14 14:35:31平安夜徽章
日期:2015-12-26 00:06:30数据库技术版块每日发帖之星
日期:2015-12-01 06:20:002015亚冠之首尔
日期:2015-11-04 22:25:43IT运维版块每日发帖之星
日期:2015-08-17 06:20:00寅虎
日期:2014-06-04 16:25:27狮子座
日期:2014-05-12 11:00:00辰龙
日期:2013-12-20 17:07:19射手座
日期:2013-10-24 21:01:23CU十二周年纪念徽章
日期:2013-10-24 15:41:34IT运维版块每日发帖之星
日期:2016-01-27 06:20:0015-16赛季CBA联赛之新疆
日期:2016-06-07 14:10:01
发表于 2014-06-25 06:48 |显示全部楼层
云不一定要是虚拟化,但是虚拟化推动了云的发展.
云带来的问题是硬件规模的急速膨胀,管理起来很困难.
传统的烟囱项目一般也就小10台左右机器,架构简单,分散维护.
现在云化以后,几十上百台机器常见,必须实现运维自动化.
而且云相伴的就是大数据.
以前集中数据存储,一般也就是在oe里面,搞搞数据备份和迁移还是可能的
现在有了大数据,用户胃口也来了.几十几百T都不是事.
问题是这么多数据的存储,分析转储是个问题.
架构选择很重要.
一旦选了splunk或者es,再想换成hdfs/impala/shark那就要哭了.
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP