免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
楼主: happy_fish100
打印 上一主题 下一主题

[FastDFS] FastDFS分布式文件系统应用交流!赢取数据库技术大会门票!(获奖名单公布) [复制链接]

论坛徽章:
0
21 [报告]
发表于 2012-02-26 18:38 |只看该作者
国内 为数不多的 FS

论坛徽章:
0
22
发表于 2012-02-27 07:15
提示: 作者被禁止或删除 内容自动屏蔽

论坛徽章:
1
CU十二周年纪念徽章
日期:2013-10-24 15:41:34
23 [报告]
发表于 2012-02-27 09:41 |只看该作者
支持一下。

论坛徽章:
0
24 [报告]
发表于 2012-02-27 09:57 |只看该作者
happy_fish100 发表于 2012-02-24 22:09
恩,是的。当然你也可以复用storage server。


复用storage server 那我只需要其中一台就可以,不用2个都安装一遍 bdb dht?

论坛徽章:
4
2015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:56:11IT运维版块每日发帖之星
日期:2016-08-11 06:20:00IT运维版块每日发帖之星
日期:2016-08-15 06:20:00
25 [报告]
发表于 2012-02-27 10:27 |只看该作者
回复 24# xiaodi553

用于测试,可以只有单台。
线上服务器,至少要两台,做个互备吧。

论坛徽章:
0
26 [报告]
发表于 2012-02-27 19:17 |只看该作者

论坛徽章:
0
27 [报告]
发表于 2012-02-27 20:54 |只看该作者
本帖最后由 独臂剑客 于 2012-02-27 21:00 编辑

看了<<分布式文件系统FastDFS>>简介,不错,赞一个

1:不支持并行写,这个比较合理,chubby实现看也有不小缺点。
2:看文档好像不支持修改操作,不过看有追加写API,修改实现应该也会在那个版本会支持吧。
3:有没有考虑对不同磁盘介质如SATA、SAS、SSD等做一些配置、读写合并优化等。
4:不支持用户自定义文件名,对于一些可以用KEY生成文件名的公司业务,如果业务有太多小文件,业务自己存文件名就要重新搭一套SQL/NoSQL,FastDFS是否可以内部搭建索引帮业务完成,现在都有比较成熟的nosql开源借鉴,不过看作者如何考虑。
5:组内文件同步机制如何完成?如果和rsync类实现机制,对于强一致性的业务虽然可以从源数据访问,但对于高并发业务还是有局限性,是否考虑在storage前加一层cache模块?tracker下载时间戳判断来看逻辑任务比较重了。
6:如果新加一组服务器,是否业务新写请求都落到新加入组,扩容系统是否有自动均匀存储,自动平衡迁移的能力?
7:如果组内每一台服务器盘异常或文件块损坏,是否有自动恢复能力?
8:发现没有预上传接口,对于重复存储文件,FastDFS如何处理的?
9:下载文件以及存储 读取这些都要询问tracker,tracker网络在大并发业务处理会成为屏劲,前端client有没有缓冲?
10:热点文件前端http模块有没有处理?

就随便列几点吧,祝福FastDFS日益成熟,不知是否有开源组织和LZ一起完善?


求职 : Linux运维
论坛徽章:
19
CU大牛徽章
日期:2013-03-13 15:15:0815-16赛季CBA联赛之山东
日期:2016-10-31 10:40:10综合交流区版块每日发帖之星
日期:2016-07-06 06:20:00IT运维版块每日发帖之星
日期:2016-02-08 06:20:00数据库技术版块每日发帖之星
日期:2016-01-15 06:20:00IT运维版块每日发帖之星
日期:2016-01-15 06:20:00IT运维版块每日发帖之星
日期:2016-01-10 06:20:00黄金圣斗士
日期:2015-11-24 10:45:10IT运维版块每日发帖之星
日期:2015-09-01 06:20:00IT运维版块每日发帖之星
日期:2015-08-13 06:20:00IT运维版块每日发帖之星
日期:2015-07-30 09:40:012015年亚洲杯之巴勒斯坦
日期:2015-05-05 10:19:03
28 [报告]
发表于 2012-02-27 22:50 |只看该作者
FastDFS使用的什么授权协议哦。是自由、开源软件吗?现在觉得最值得研究的就是自由开源软件。那样的软件生命周期是不被任何人要挟的,真正的自然进化过程。呵呵

求职 : Linux运维
论坛徽章:
19
CU大牛徽章
日期:2013-03-13 15:15:0815-16赛季CBA联赛之山东
日期:2016-10-31 10:40:10综合交流区版块每日发帖之星
日期:2016-07-06 06:20:00IT运维版块每日发帖之星
日期:2016-02-08 06:20:00数据库技术版块每日发帖之星
日期:2016-01-15 06:20:00IT运维版块每日发帖之星
日期:2016-01-15 06:20:00IT运维版块每日发帖之星
日期:2016-01-10 06:20:00黄金圣斗士
日期:2015-11-24 10:45:10IT运维版块每日发帖之星
日期:2015-09-01 06:20:00IT运维版块每日发帖之星
日期:2015-08-13 06:20:00IT运维版块每日发帖之星
日期:2015-07-30 09:40:012015年亚洲杯之巴勒斯坦
日期:2015-05-05 10:19:03
29 [报告]
发表于 2012-02-27 22:53 |只看该作者
FastDFS使用的什么授权协议哦。是自由、开源软件吗?现在觉得最值得研究的就是自由开源软件。那样的软件生命周期是不被任何人要挟的,真正的自然进化过程。呵呵

论坛徽章:
2
技术图书徽章
日期:2013-09-04 15:21:51酉鸡
日期:2013-11-01 21:20:20
30 [报告]
发表于 2012-02-28 00:37 |只看该作者
1. 文件的存储
   a. 文件系统的node是固定的,那么存储小文件或者大文件,FastDFS可以忽略这个限制吗?
   b. FastDFS对于OS的文件系统参数是否有特别推荐要求,比如块大小之类的?
   c. 一台存储是否只能归属于一个组?

2. 文件的备份恢复
   a. 如果出现异常,掉电/网络断开等导致文件存储过程被打断,FastDFS如何处理?
   b. 如果存储介质出现问题,FastDFS如何恢复数据?(可以部分恢复或全部失效?)
   c. 如果组内一台存储失效,那么新增一台存储,FastDFS是否可以自动做数据同步?如果做,时效性如何?
   d. 如果tracker失效,是否意味着存储成为黑盒子?如果是,是否有备份tracker的机制?

3. 应用
   a. 将来是否支持fuse?如果是,预计什么时间?
   b. 均衡策略如何?大文件/小文件的访问占用资源是不同的,FastDFS如何处理均衡?
   c. 大内存的存储或者mfs是否有助于提高访问速度?
   d. tracker和storage是否可以共用一台机器?如果可以,storage是否可以利用单机多盘方式冗余存储数据?
   e. tracker和storage是否支持类似nginx的不间断服务修改配置或升级?   
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP