免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
123下一页
最近访问板块 发新帖
查看: 27495 | 回复: 21

[其他] 求大量小图片存储方案 [复制链接]

论坛徽章:
0
发表于 2011-05-31 09:54 |显示全部楼层
大家好,公司以前的生产环境,直接在服务器硬盘上存储小图片。每个图片200KB左右。现在随着业务发展,小图片越来越多,在服务器上直接存储的劣式越来越明显。管理不方便,性能低下。请教大家有没有好的解决方案,谢谢。数据大概有200TB

论坛徽章:
199
15-16赛季CBA联赛之青岛
日期:2019-10-11 09:43:1715-16赛季CBA联赛之江苏
日期:2018-09-17 13:50:1315-16赛季CBA联赛之江苏
日期:2018-08-08 14:12:3815-16赛季CBA联赛之青岛
日期:2018-08-08 11:17:1915-16赛季CBA联赛之广夏
日期:2018-03-01 16:41:0915-16赛季CBA联赛之浙江
日期:2017-12-28 14:13:38黑曼巴
日期:2017-12-11 12:52:0315-16赛季CBA联赛之吉林
日期:2017-12-11 12:51:5915-16赛季CBA联赛之天津
日期:2017-10-30 09:57:35CU十四周年纪念徽章
日期:2017-10-13 17:10:0215-16赛季CBA联赛之福建
日期:2017-05-11 14:36:1515-16赛季CBA联赛之四川
日期:2017-04-26 19:47:16
发表于 2011-05-31 13:55 |显示全部楼层
那要看你公司拿的出多少钱来升级了

论坛徽章:
0
发表于 2011-05-31 18:51 |显示全部楼层
我所了解的一是走分布式文件系统。还有一种说法,说是用数据库存储,没有更多的接触。用太高端的存储肯定不划算。

论坛徽章:
0
发表于 2011-05-31 19:09 |显示全部楼层
可以考虑用SYBASE IQ 数据库存储,200T数据估计能压缩到100T

论坛徽章:
9
技术图书徽章
日期:2014-10-14 15:48:13数据库技术版块每日发帖之星
日期:2015-06-04 22:20:00数据库技术版块每日发帖之星
日期:2015-06-10 22:20:00数据库技术版块每日发帖之星
日期:2015-06-11 22:20:00数据库技术版块每日发帖之星
日期:2015-06-13 22:20:00IT运维版块每日发帖之星
日期:2015-09-22 06:20:00IT运维版块每日发帖之星
日期:2015-12-08 06:20:00综合交流区版块每日发帖之星
日期:2016-02-02 06:20:00IT运维版块每日发帖之星
日期:2016-07-25 06:20:00
发表于 2011-05-31 22:05 |显示全部楼层
大家好,公司以前的生产环境,直接在服务器硬盘上存储小图片。每个图片200KB左右。现在随着业务发展,小图片 ...
flysever 发表于 2011-05-31 09:54



    一个图片200K,200TB是10亿个图片,性能主要取决于索引机制和网络架构。

论坛徽章:
0
发表于 2011-06-01 08:41 |显示全部楼层
回复 5# bbjmmj
现在是为了解决存储这些小图片的问题。目前所有图片的地址路径是保存在数据库里面

论坛徽章:
0
发表于 2011-06-01 14:02 |显示全部楼层
大家好,公司以前的生产环境,直接在服务器硬盘上存储小图片。每个图片200KB左右。现在随着业务发展,小图片 ...
flysever 发表于 2011-05-31 09:54



揭秘淘宝286亿海量图片存储与处理架构
http://storage.it168.com/a2010/0829/1096/000001096373_all.shtml

偶采访淘宝的文章可以参考下的哦亲,淘宝用的分布式文件系统哦亲,应该是开源的哦亲

论坛徽章:
0
发表于 2011-06-01 22:18 |显示全部楼层
回复 7# 夜的小宇宙
淘宝的我们在做试验,文档很少,有些还没有搞明白

论坛徽章:
0
发表于 2011-06-02 22:25 |显示全部楼层
采用分级存储方式可以实现。另外不建议采用虚拟存储和存储压缩技术,这些技术虽然能够保证存储的利用率,但会改变原有图片的分辨率,提取的数据与源数据会有差别。

论坛徽章:
0
发表于 2011-06-02 22:38 |显示全部楼层
TFS太猛了点了吧
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

SACC2019中国系统架构师大会

【数字转型 架构演进】SACC2019中国系统架构师大会
2019年10月31日~11月2日第11届中国系统架构师大会(SACC2019)将在北京隆重召开。四大主线并行的演讲模式,1个主会场、20个技术专场、超千人参与的会议规模,100+来自互联网、金融、制造业、电商等领域的嘉宾阵容,将为广大参会者提供一场最具价值的技术交流盛会。




----------------------------------------

大会官网>>
  

北京盛拓优讯信息技术有限公司. 版权所有 16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122
中国互联网协会会员  联系我们:huangweiwei@it168.com
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP