论坛徽章:: 0

电梯直达

1楼 [收藏(0)] [报告]

发表于 2009-02-17 13:14 |只看该作者 |倒序浏览

要求如下:\r\n\r\n1.假设我有500T内容.将来有可能更多.我想利用普通的服务器(带有多个串口硬盘)来分布存储.如实现.\r\n\r\n2.我的构想是这样的.但不知有什么软件可以实现.\r\nA.有一台索引服务器.作用是组织和管理普通服务器.通过它数据访问者可能定位数据在那台服务器.是在AA,还是CC上.\r\nB.普通服务器(很多,如AA,BB,CC,DD.....).用来存储数据的.\r\nC.上面的结构必须同时也能做到冗余和集群.如索引服务器.如果死机了.也必须有另一台替代马上替代.必须有很好的扩展性.将来加一台或是减一台服务器不影响整个系统的使用.\r\n\r\n有什么好的软件方案吗?当然是开源最好的.\r\n\r\n我了解过HADOOP HDFS.不过了解不深.皮毛.说白了,目前也不知这东西具体干什么呢?\n\n[ 本帖最后由 todayhero 于 2009-2-17 13:20 编辑 ]

jgtvisionnex

富足长乐

论坛徽章:: 0

2楼 [报告]

发表于 2009-02-17 13:24 |只看该作者

抢个沙发！\r\n\r\n这个好像是一个视频网站的需求啊！现在可以使用StorNext来做共享存储软件，但是你说的肯定需要进一步开发才可以完成。建议存储还是购买存储厂商的存储吧，不要自己拿服务器挂硬盘当成存储了！这样不好的！

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

todayhero

腰缠万贯

论坛徽章:: 0

3楼 [报告]

发表于 2009-02-17 13:48 |只看该作者

1.普通服务器不是便宜吗?\r\n\r\n2.关于视频网站.更不会买存储设备了.他们主要还是使用服务器挂大硬盘的.经济实用.

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

ops

丰衣足食

论坛徽章:: 0

4楼 [报告]

发表于 2009-02-17 14:43 |只看该作者

你的构想其实就是一个分布式系统的初始。但是现在的开源的分布式系统好像成熟的也不太多，很多都要进行修改的，特别是要和你的使用环境和内容进行配合，仅仅想把开源的拿来用的话，挺难。\r\n\r\n500T的初始数据，一开始容量至少要1500T吧，而且还要同步的。这个同步的问题是很难解决的。。倒不是一定是技术上的，成本也下不来的。\r\n\r\n而且你这500T的文件类型和大小也会影响选择的。