免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
楼主: signmem
打印 上一主题 下一主题

集群中数据同步请教[仍需请教] [复制链接]

论坛徽章:
0
11 [报告]
发表于 2008-07-24 08:49 |只看该作者
原帖由 happy_fish100 于 2008-7-22 17:07 发表
可以试试FastDFS,一个开源的轻量级分布式文件存储系统。
官方网址:http://www.csource.org/
google code下载地址:http://code.google.com/p/fastdfs/downloads/list


http://hadoop.apache.org/

这个也是适合的
What Is Hadoop?The Apache Hadoop project develops open-source software for reliable, scalable, distributed computing, including:
  • Hadoop Core, our flagship sub-project, provides a distributed filesystem (HDFS) and support for the MapReduce distributed computing metaphor.
  • HBase builds on Hadoop Core to provide a scalable, distributed database.

论坛徽章:
0
12 [报告]
发表于 2008-07-24 09:49 |只看该作者
原帖由 kns1024wh 于 2008-7-24 08:49 发表


http://hadoop.apache.org/

这个也是适合的
What Is Hadoop?The Apache Hadoop project develops open-source software for reliable, scalable, distributed computing, including:
  • Hadoop Core, ...



  • 请问网页服务器上的数据同步能够用在邮件服务器吗?
    我先顶再看。

    昨天那个 HAPPY FISH 的软件就什么都干不了,光学习搭了一个什么都做不了的服务器出来,根本没有客户端能够进行同步。。。浪费了我一天时间。
    APACHE 至少大公司,信心好多了。

    论坛徽章:
    4
    2015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:56:11IT运维版块每日发帖之星
日期:2016-08-11 06:20:00IT运维版块每日发帖之星
日期:2016-08-15 06:20:00
    13 [报告]
    发表于 2008-07-24 12:54 |只看该作者

    回复 #12 signmem 的帖子

    目前FastDFS主要还是定位于多媒体文件存储,适用范围相对窄一些。对于解决多媒体文件的大容量存储和高访问量问题,是一个轻量级的解决方案。
    后续会考虑做一个比较通用的分布式文件系统,可以mount上来使用。

    论坛徽章:
    4
    2015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:56:11IT运维版块每日发帖之星
日期:2016-08-11 06:20:00IT运维版块每日发帖之星
日期:2016-08-15 06:20:00
    14 [报告]
    发表于 2008-07-24 12:56 |只看该作者

    回复 #12 signmem 的帖子

    Hadoop主要是一个并行计算平台,其集群存储的目的主要是为了解决并行计算的问题。你可以试试看是否适合。

    论坛徽章:
    33
    荣誉会员
日期:2011-11-23 16:44:17天秤座
日期:2014-08-26 16:18:20天秤座
日期:2014-08-29 10:12:18丑牛
日期:2014-08-29 16:06:45丑牛
日期:2014-09-03 10:28:58射手座
日期:2014-09-03 16:01:17寅虎
日期:2014-09-11 14:24:21天蝎座
日期:2014-09-17 08:33:55IT运维版块每日发帖之星
日期:2016-04-17 06:23:27操作系统版块每日发帖之星
日期:2016-04-18 06:20:00IT运维版块每日发帖之星
日期:2016-04-24 06:20:0015-16赛季CBA联赛之天津
日期:2016-05-06 12:46:59
    15 [报告]
    发表于 2008-07-24 20:38 |只看该作者
    NFS服务器可以做成HA方式的.

    论坛徽章:
    0
    16 [报告]
    发表于 2008-07-25 19:46 |只看该作者
    原帖由 signmem 于 2008-7-24 09:49 发表



    请问网页服务器上的数据同步能够用在邮件服务器吗?
    我先顶再看。

    昨天那个 HAPPY FISH 的软件就什么都干不了,光学习搭了一个什么都做不了的服务器出来,根本没有客户端能够进行同步。。。浪费了我一 ...

    这个是文件系统
    不是什么网页的数据同步
    你好好理解一下 这个LJ

    论坛徽章:
    0
    17 [报告]
    发表于 2008-07-28 22:37 |只看该作者
    原帖由 q1208c 于 2008-7-24 20:38 发表
    NFS服务器可以做成HA方式的.




    具体一点好吗??

    论坛徽章:
    0
    18 [报告]
    发表于 2008-07-29 12:47 |只看该作者
    建议LZ先评估一下自己的系统读和写的量的情况,如写也很频繁,建议不要用同步的方式,否则多节点的优势就出不来了.

    论坛徽章:
    0
    19 [报告]
    发表于 2008-08-02 13:58 |只看该作者

    回复 #1 signmem 的帖子

    或许你应该从你的程序出发,来合理利用两台服务器。
    比如,写邮件的时候,同时写到两台服务器,得到确认后才认为写邮件完成。读的时候就从一台服务器读。

    有或者DRDB和glusterfs也是不错的解决方法,看你怎么用了。

    论坛徽章:
    0
    20 [报告]
    发表于 2008-11-13 13:40 |只看该作者
    我在实际测试中发现glusterfs存在cpu和负载太高的问题。基本上不能在生产环境中使用。有人在生产环境中使用过glusterfs吗。
    您需要登录后才可以回帖 登录 | 注册

    本版积分规则 发表回复

      

    北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
    未成年举报专区
    中国互联网协会会员  联系我们:huangweiwei@itpub.net
    感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

    清除 Cookies - ChinaUnix - Archiver - WAP - TOP