忘记密码   免费注册 查看新帖 | 论坛精华区

ChinaUnix.net

  平台 论坛 博客 认证专区 大话IT HPC论坛 徽章 文库 沙龙 自测 下载 频道自动化运维 虚拟化 储存备份 C/C++ PHP MySQL 嵌入式 Linux系统
最近访问板块 发新帖
楼主: wlmqgzm

[C++] 读性能超过Memcached 65%, 单核也超过redis, 支持日志支持掉电保护,欢迎试用 [复制链接]

论坛徽章:
3
2015年辞旧岁徽章
日期:2015-03-03 16:54:152015年迎新春徽章
日期:2015-03-04 09:49:032015年亚洲杯之中国
日期:2015-04-22 15:52:45
发表于 2016-05-09 13:18 |显示全部楼层
windoze 发表于 2016-05-09 13:12
回复 9# fender0107401

你可以考虑把这些小文件合并成一个大文件,建一个偏移量索引,然后用mmap。


你也可以考虑把这些小文件合并到一个磁盘/dev/sdb,建一个偏移量索引,然后用mmap整个sdb....

招聘 : c/c++研发
论坛徽章:
0
发表于 2016-05-09 15:24 |显示全部楼层
楼主可以留下邮箱或微信吗?
想交流下

论坛徽章:
89
水瓶座
日期:2014-04-01 08:53:31天蝎座
日期:2014-04-01 08:53:53天秤座
日期:2014-04-01 08:54:02射手座
日期:2014-04-01 08:54:15子鼠
日期:2014-04-01 08:55:35辰龙
日期:2014-04-01 08:56:36未羊
日期:2014-04-01 08:56:27戌狗
日期:2014-04-01 08:56:13亥猪
日期:2014-04-01 08:56:02亥猪
日期:2014-04-08 08:38:58每日论坛发贴之星
日期:2015-08-28 06:20:00每日论坛发贴之星
日期:2015-12-28 06:20:00
发表于 2016-05-09 15:26 |显示全部楼层
回复 10# windoze

这个我不会啊。

我直接弄了个程序扔那就不管了,慢慢跑。


   

论坛徽章:
89
水瓶座
日期:2014-04-01 08:53:31天蝎座
日期:2014-04-01 08:53:53天秤座
日期:2014-04-01 08:54:02射手座
日期:2014-04-01 08:54:15子鼠
日期:2014-04-01 08:55:35辰龙
日期:2014-04-01 08:56:36未羊
日期:2014-04-01 08:56:27戌狗
日期:2014-04-01 08:56:13亥猪
日期:2014-04-01 08:56:02亥猪
日期:2014-04-08 08:38:58每日论坛发贴之星
日期:2015-08-28 06:20:00每日论坛发贴之星
日期:2015-12-28 06:20:00
发表于 2016-05-09 15:27 |显示全部楼层
回复 11# hanxin83

这个我也不会啊。

   

招聘 : c/c++研发
论坛徽章:
0
发表于 2016-05-09 15:29 |显示全部楼层
或者先做一个单Table的Mysql, 实现单表的SELECT, UPDATE,DELETE, INSERT, CREATE TABLE. DROP TABLE, ALTER TABLE, TRUNC TABLE

//楼主还要实现一个sql层??

论坛徽章:
39
巨蟹座
日期:2013-10-25 10:53:02程序设计版块每日发帖之星
日期:2016-01-27 06:20:00每日论坛发贴之星
日期:2016-01-27 06:20:0015-16赛季CBA联赛之佛山
日期:2016-02-04 21:11:3615-16赛季CBA联赛之佛山
日期:2016-02-05 00:55:2015-16赛季CBA联赛之福建
日期:2016-03-18 12:13:4015-16赛季CBA联赛之辽宁
日期:2016-03-24 21:38:2715-16赛季CBA联赛之福建
日期:2016-04-12 15:21:2915-16赛季CBA联赛之山东
日期:2016-04-17 12:00:282016科比退役纪念章
日期:2016-04-23 00:51:2315-16赛季CBA联赛之新疆
日期:2016-04-25 10:55:45程序设计版块每日发帖之星
日期:2016-07-02 06:20:00
发表于 2016-05-09 15:48 |显示全部楼层
回复 15# lijianweiabcde

用kv的思路,实现到这个地方的时候估计lz得哭会儿

论坛徽章:
9
程序设计版块每日发帖之星
日期:2015-10-18 06:20:00程序设计版块每日发帖之星
日期:2015-11-01 06:20:00程序设计版块每日发帖之星
日期:2015-11-02 06:20:00每日论坛发贴之星
日期:2015-11-02 06:20:00程序设计版块每日发帖之星
日期:2015-11-03 06:20:00程序设计版块每日发帖之星
日期:2015-11-04 06:20:00程序设计版块每日发帖之星
日期:2015-11-06 06:20:00数据库技术版块每周发帖之星
日期:2015-12-02 15:02:47数据库技术版块每日发帖之星
日期:2015-12-08 06:20:00
发表于 2016-05-09 17:42 |显示全部楼层
本帖最后由 wlmqgzm 于 2016-05-09 18:39 编辑

回复 15# lijianweiabcde

存储层做完了之后, 就要考虑用户接口层, 如果图省事就采用memcached命令集,这样出一个测试版本比较快.
如果进展非常顺利,那么就弄复杂一点, 搞一个Mysql层, 先支持单表查询更新,做一个最像Mysql的Nosql, 觉得Mysql命令集还是比Memcached命令集好用,

用户接口层的代码,可大可小,看情况吧.

最近集中精力做存储层的代码,各种思路随时更改,也有可能有些设想不能够实现,重点是存储层,要覆盖主要功能点, 就看中间会遇到几个坑了.
交流的话, 可以在这个帖子中咨询, 谢谢.

   

论坛徽章:
11
2015年辞旧岁徽章
日期:2015-03-03 16:54:152016科比退役纪念章
日期:2016-11-07 08:28:12luobin
日期:2016-06-17 17:46:36wusuopu
日期:2016-06-17 17:43:4515-16赛季CBA联赛之福建
日期:2016-01-14 12:49:22程序设计版块每日发帖之星
日期:2015-12-13 06:20:00程序设计版块每日发帖之星
日期:2015-06-08 22:20:00程序设计版块每日发帖之星
日期:2015-06-08 22:20:002015年亚洲杯之科威特
日期:2015-03-24 14:21:272015年迎新春徽章
日期:2015-03-04 09:57:0915-16赛季CBA联赛之同曦
日期:2017-03-17 19:13:16
发表于 2016-05-09 19:00 |显示全部楼层
卤煮用什么写?C?C++?

论坛徽章:
9
程序设计版块每日发帖之星
日期:2015-10-18 06:20:00程序设计版块每日发帖之星
日期:2015-11-01 06:20:00程序设计版块每日发帖之星
日期:2015-11-02 06:20:00每日论坛发贴之星
日期:2015-11-02 06:20:00程序设计版块每日发帖之星
日期:2015-11-03 06:20:00程序设计版块每日发帖之星
日期:2015-11-04 06:20:00程序设计版块每日发帖之星
日期:2015-11-06 06:20:00数据库技术版块每周发帖之星
日期:2015-12-02 15:02:47数据库技术版块每日发帖之星
日期:2015-12-08 06:20:00
发表于 2016-05-09 21:24 |显示全部楼层
本帖最后由 wlmqgzm 于 2016-05-09 21:30 编辑

回复 18# VIP_fuck

    C++ 类似下面这种

class  Mapping_read
{
  public:
    Mapping_read( void );
    unsigned int  read( const unsigned long long ulong_read_file_offset,  const unsigned int uint_read_length,  unsigned char* uchars_out );
    unsigned int  lz4_read( const unsigned long long ulong_read_file_offset,  const unsigned int uint_read_uncompress_length,  const unsigned int uint_out_size,  unsigned char* uchars_out );
    const unsigned char* get_uchars_begin( void );
    const char* get_chars_begin( void );
    unsigned long long  get_size( void);

  protected:
    unsigned long long  d_ulong_file_size;
    unsigned char  *d_uchars_begin;
    char  *d_chars_begin;
    //  以下为lz4压缩的读取缓存队列
    std::unordered_map<unsigned long long, std::shared_ptr<std::vector<unsigned char> > >  d_map_lz4_cache;//  hash表 用于lz4 cache
    std::list<unsigned long long>  d_list_lz4_cache_offset;  // 用于制造一个lz4 cache先进先出队列
    std::atomic<unsigned int>   d_list_lz4_cache_count;   //  用于统计队列长度的原子量
};

招聘 : c/c++研发
论坛徽章:
0
发表于 2016-05-10 09:25 |显示全部楼层
本帖最后由 lijianweiabcde 于 2016-05-10 09:26 编辑

回复 17# wlmqgzm
我以前做过用某个存储系统替换掉mysql的innodb.....用替换不太合适,因为mysql提供了对接第三方存储的接口
您需要登录后才可以回帖 登录 | 注册

本版积分规则

SACC2017购票8.8折优惠进行时

2017中国系统架构师大会(SACC2017)将于10月19-21日在北京新云南皇冠假日酒店震撼来袭。今年,大会以“云智未来”为主题,云集国内外顶级专家,围绕云计算、人工智能、大数据、移动互联网、产业应用等热点领域展开技术探讨与交流。本届大会共设置2大主会场,18个技术专场;邀请来自互联网、金融、制造业、电商等多个领域,100余位技术专家及行业领袖来分享他们的经验;并将吸引4000+人次的系统运维、架构师及IT决策人士参会,为他们提供最具价值的交流平台。
----------------------------------------
优惠时间:2017年8月2日前

活动链接>>
  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号 北京市公安局海淀分局网监中心备案编号:11010802020122
广播电视节目制作经营许可证(京) 字第1234号 中国互联网协会会员  联系我们:
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP