免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
楼主: send_linux
打印 上一主题 下一主题

[其他] 遭遇大数据 我们的存储如何应对?欢迎参与!(获奖名单已公布2013-1-17) [复制链接]

论坛徽章:
15
CU大牛徽章
日期:2013-03-13 15:32:35白羊座
日期:2013-10-30 13:11:16未羊
日期:2013-11-29 10:47:02白羊座
日期:2014-01-22 11:34:25白羊座
日期:2014-03-04 11:05:50申猴
日期:2014-07-29 16:31:36天秤座
日期:2013-10-23 15:33:47未羊
日期:2013-10-09 09:18:53CU大牛徽章
日期:2013-03-13 15:38:15CU大牛徽章
日期:2013-03-13 15:38:52CU大牛徽章
日期:2013-03-14 14:08:55未羊
日期:2013-09-23 09:29:22
11 [报告]
发表于 2013-01-07 17:17 |只看该作者
1、        你所在的企业是否也遇到了大数据的问题?具体表现在哪些方面?
大数据的问题很多,最明显的问题就是热点盘的问题。系统都是逐步升级的,关键业务一般都放在最初设计的硬盘中,在业务量增长后,很容易形成热点盘,做热点盘数据迁移不容易,需要分析,查数据,怎么分配到新增加的硬盘上等一系列的工作,耗时费力,每一次业务的增长都容易遇到这样的问题,怎么能自动调整热点盘的数据,让热点盘能自动冷下来?

论坛徽章:
59
2015七夕节徽章
日期:2015-08-24 11:17:25ChinaUnix专家徽章
日期:2015-07-20 09:19:30每周论坛发贴之星
日期:2015-07-20 09:19:42ChinaUnix元老
日期:2015-07-20 11:04:38荣誉版主
日期:2015-07-20 11:05:19巳蛇
日期:2015-07-20 11:05:26CU十二周年纪念徽章
日期:2015-07-20 11:05:27IT运维版块每日发帖之星
日期:2015-07-20 11:05:34操作系统版块每日发帖之星
日期:2015-07-20 11:05:36程序设计版块每日发帖之星
日期:2015-07-20 11:05:40数据库技术版块每日发帖之星
日期:2015-07-20 11:05:432015年辞旧岁徽章
日期:2015-07-20 11:05:44
12 [报告]
发表于 2013-01-07 17:27 |只看该作者
MARKg gh .

论坛徽章:
6
CU大牛徽章
日期:2013-03-14 14:14:08CU大牛徽章
日期:2013-03-14 14:14:26CU大牛徽章
日期:2013-03-14 14:14:29处女座
日期:2014-04-21 11:51:59辰龙
日期:2014-05-12 09:15:10NBA常规赛纪念章
日期:2015-05-04 22:32:03
13 [报告]
发表于 2013-01-08 08:54 |只看该作者
从大数据的这个名词定义中我们就可以看出来,所谓的大数据是个技术难题。但实际情况是,真正启动大数据项目后,企业和组织所面临的不仅仅是技术和工具问题,更重要的是要转变我们现在企业公司内部所有的组织架构和思维。

各个部门和分支机构间的不同格式的数据,如何将这些数据整合到一块就是一个首要问题。

大数据的第一步,数据治理。

论坛徽章:
13
技术图书徽章
日期:2014-04-29 14:15:42IT运维版块每日发帖之星
日期:2015-12-12 06:20:00IT运维版块每日发帖之星
日期:2015-08-30 06:20:00IT运维版块每日发帖之星
日期:2015-08-24 06:20:00IT运维版块每日发帖之星
日期:2015-08-02 06:20:002015年亚洲杯之澳大利亚
日期:2015-04-03 15:03:12申猴
日期:2015-03-20 09:00:292015年迎新春徽章
日期:2015-03-04 09:54:452015年辞旧岁徽章
日期:2015-03-03 16:54:15季节之章:冬
日期:2015-01-20 17:08:47双子座
日期:2014-11-21 16:30:31技术图书徽章
日期:2014-07-11 16:29:08
14 [报告]
发表于 2013-01-08 09:29 |只看该作者
围观中,等待大家的分享

论坛徽章:
49
15-16赛季CBA联赛之福建
日期:2016-06-22 16:22:002015年亚洲杯之中国
日期:2015-01-23 16:25:12丑牛
日期:2015-01-20 09:39:23未羊
日期:2015-01-14 23:55:57巳蛇
日期:2015-01-06 18:21:36双鱼座
日期:2015-01-02 22:04:33午马
日期:2014-11-25 09:58:35辰龙
日期:2014-11-18 10:40:07寅虎
日期:2014-11-13 22:47:15申猴
日期:2014-10-22 15:29:50摩羯座
日期:2014-08-27 10:49:43辰龙
日期:2014-08-21 10:47:58
15 [报告]
发表于 2013-01-08 09:32 |只看该作者
dengbao2001 发表于 2013-01-08 09:29
围观中,等待大家的分享


让大家提出问题啊,欢迎参与,会有人帮忙回答的:)

论坛徽章:
13
技术图书徽章
日期:2014-04-29 14:15:42IT运维版块每日发帖之星
日期:2015-12-12 06:20:00IT运维版块每日发帖之星
日期:2015-08-30 06:20:00IT运维版块每日发帖之星
日期:2015-08-24 06:20:00IT运维版块每日发帖之星
日期:2015-08-02 06:20:002015年亚洲杯之澳大利亚
日期:2015-04-03 15:03:12申猴
日期:2015-03-20 09:00:292015年迎新春徽章
日期:2015-03-04 09:54:452015年辞旧岁徽章
日期:2015-03-03 16:54:15季节之章:冬
日期:2015-01-20 17:08:47双子座
日期:2014-11-21 16:30:31技术图书徽章
日期:2014-07-11 16:29:08
16 [报告]
发表于 2013-01-08 09:35 |只看该作者
回复 16# send_linux

汗一个!


   

论坛徽章:
13
技术图书徽章
日期:2014-04-29 14:15:42IT运维版块每日发帖之星
日期:2015-12-12 06:20:00IT运维版块每日发帖之星
日期:2015-08-30 06:20:00IT运维版块每日发帖之星
日期:2015-08-24 06:20:00IT运维版块每日发帖之星
日期:2015-08-02 06:20:002015年亚洲杯之澳大利亚
日期:2015-04-03 15:03:12申猴
日期:2015-03-20 09:00:292015年迎新春徽章
日期:2015-03-04 09:54:452015年辞旧岁徽章
日期:2015-03-03 16:54:15季节之章:冬
日期:2015-01-20 17:08:47双子座
日期:2014-11-21 16:30:31技术图书徽章
日期:2014-07-11 16:29:08
17 [报告]
发表于 2013-01-08 09:38 |只看该作者
第三个案例与我们有点类似。

因为我们的全球性企业,SAP是公司的核心系统之一,不过这个方面因为不属于Site IT负责,具体的情况不知道。

作为我们Site的应用,按照审核的一些要求,一般的数据都是保留3年的,3年后可以销毁,只有生产数据是保留10年。

大数据对我们还是一个模糊的概念,我们在线的数据不会达到大数据的级别的,通过达到了一定时间,会将数据进行归档的。

可能由于行业的不同,像电视台这些,视频编辑、播放,很希望有人能分享下经验。

论坛徽章:
0
18 [报告]
发表于 2013-01-08 10:07 |只看该作者
个人认为对于大数据,我们不应该只关注数据量具体有多大,

而是应该更多的关注如何对于庞大的数据进行分类,构建合理的数据模型和存储模型至关重要,以便于高效合理的存储这些数据。

论坛徽章:
1
数据库技术版块每日发帖之星
日期:2016-06-04 06:20:00
19 [报告]
发表于 2013-01-08 10:10 |只看该作者
楼上说的是指备份、归档方面吧?

FB开源的Open Vault会不会有帮助? 我看到一些厂商在用Hadoop里面的HDFS和MapReduce这些技术,这个能解决问题么?

论坛徽章:
0
20 [报告]
发表于 2013-01-08 10:55 |只看该作者
1.目前对大数据的定义是什么?指的是大量的非结构化数据吗?

2.对于共享视频文件、CAD图片等场景,是不是用昆腾的StorNext就能解决了!

3.目前很多互联网企业采用开源、分布式架构,相关概念、解决方案也是由他们提出与推广。那么对于非IT行业来说,因为维护的问题,往往需要稳定可靠、好维护的商业化解决方案,可能厂商的解决方案更合适一些。
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP