论坛徽章:: 0

1楼 [报告]

发表于 2010-11-16 12:06 |只看该作者

taobao最近开源了TFS，据说是针对小文件应用的，http://code.taobao.org/project/view/366/
不过，这个不支持POSIX接口，无法mount到本地

mfs(moosefs)基于FUSE实现了本地文件系统接口，可以mount，但是没有对小文件做性能优化

lustre是集群文件系统，接口和性能应该能满足你的要求，不过这个管理起来要复杂一些

也弹吉他

白手起家

论坛徽章:: 0

2楼 [报告]

发表于 2010-11-16 12:58 |只看该作者

taobao最近开源了TFS，据说是针对小文件应用的，http://code.taobao.org/project/view/366/
不过，这个不支持POSIX接口，无法mount到本地

mfs(moosefs)基于FUSE实现了本地文件系统接口，可以mount，但是没有对小文件做性能优化

lustre是集群文件系统，接口和性能应该能满足你的要求，不过这个管理起来要复杂一些
liuag 发表于 2010-11-16 12:06

十分感谢，不知道GlusterFS呢~~

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

liuag

白手起家

论坛徽章:: 0

3楼 [报告]

发表于 2010-11-16 16:58 |只看该作者

回复 3# 也弹吉他

以前没用过Glusterfs，简单看了一下GlusterFS，也能满足你的需求。

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

也弹吉他

白手起家

论坛徽章:: 0

4楼 [报告]

发表于 2010-11-16 17:20 |只看该作者

回复也弹吉他

以前没用过Glusterfs，简单看了一下GlusterFS，也能满足你的需求。
liuag 发表于 2010-11-16 16:58

多谢支持啊~！！貌似这个版块比较不给力啊~，还是大牛们都比较忙，没时间逛论坛

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

king_addison

白手起家

论坛徽章:: 0

5楼 [报告]

发表于 2010-11-16 20:16 |只看该作者

你们可以根据自己的业务特点开发自己的文件系统，不过这个成本比较高

腾讯就是这么干的

然后，你可以用IOZONE在不同的文件系统下进行实际的业务压力测试，看看那一种文件系统更适合你们的应用。

你给出的描述太简单了，大家都没办法告诉你具体用什么文件系统适合你们的业务。建议你去看看提问的艺术。

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

也弹吉他

白手起家

论坛徽章:: 0

6楼 [报告]

发表于 2010-11-17 10:16 |只看该作者

你们可以根据自己的业务特点开发自己的文件系统，不过这个成本比较高

你们可以根据自己的业务特点开发自己的文件系统，不过这个成本比较高

腾讯就是这么干的

然后，你可以用IOZONE在不同的文件系统下进行实际的业务压力测试，看看那一种文件系统更适合你们的应用。

你给出的描述太简单了，大家都没办法告诉你具体用什么文件系统适合你们的业务。建议你去看看提问的艺术。
king_addison 发表于 2010-11-16 20:16

哦~~我得承认，我的提问确实没啥艺术啊.....

不过有实际经验的一看就明白我的意思了