免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 9035 | 回复: 0
打印 上一主题 下一主题

[其他DFS] FastCFS V4.0发布,支持单机PB级存储 [复制链接]

论坛徽章:
4
2015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:56:11IT运维版块每日发帖之星
日期:2016-08-11 06:20:00IT运维版块每日发帖之星
日期:2016-08-15 06:20:00
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2023-06-05 09:13 |只看该作者 |倒序浏览
    经过整整4个月的潜心研发,FastCFS V4.0终于与大家见面了。V4.0主要改进:faststore引入存储插件,存储节点以有限内存(如32GB)支持上百TB的存储空间。如果单机要支持PB级的存储空间,出于性价比考虑,建议存储节点至少配置128GB内存。另外V4.0 对faststore的存储层进行了重构,直接使用底层库 libdiskallocator,这样的做好处是保持一套代码,更容易维护,同时减少出bug的几率。
    faststore存储插件以block(4MB的文件块)为单位进行持久化存储,存储该block对应的slice索引;当内存不足时按block进行淘汰。faststore使用slice binlog + block索引持久化的做法,block索引持久化采用的是异步方式。总结一下faststore是否使用存储插件的差异:未使用存储插件只有slice binlog;使用存储插件是slice binlog + 按block组织的slice索引。
V4.0其他小改进:
  [fdir] add protocols get_fullname_by_[inode|pname] for fdir_stat(便于调试文件访问权限问题)
  [fuseclient] support mount option ro (read-only)(mount的文件系统支持只读模式)
  [fstore] file block size use config instead of macro define(默认为4MB的文件block大小支持配置方式)
V4.0修复的bug列表:
  [fdir] bugfixed: correct idempotency output when storage engine enabled
  [fdir] bugfixed: rename_check with flags S_ISVTX when dest dentry exist
  [fstore] bugfixed: must call slice_binlog_set_binlog_start_index(0)
  [libfastcommon] bugfixed: fast_mblock_batch_alloc correct return value
  [libdiskallocator] trunk_space_log.c: fix redo logic of keep record
    我们租用阿里云本地SSD的ECS对V4.0的数据一致性、系统稳定性以及性能进行了充分测试,欢迎大家体验和试用。建议使用旧版本的用户,尽快升级到最新版本。

您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP