免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
楼主: linux_c_py_php

[其他] [基于Epoll内置Leader-Follower服务端实现, 已可达50万echo qps(全新支持Lua啦)] [复制链接]

论坛徽章:
4
水瓶座
日期:2013-09-06 12:27:30摩羯座
日期:2013-09-28 14:07:46处女座
日期:2013-10-24 14:25:01酉鸡
日期:2014-04-07 11:54:15
发表于 2013-02-18 16:49 |显示全部楼层
嗯, 应该是printf干的, 尼玛stdout自带锁了.

论坛徽章:
4
水瓶座
日期:2013-09-06 12:27:30摩羯座
日期:2013-09-28 14:07:46处女座
日期:2013-10-24 14:25:01酉鸡
日期:2014-04-07 11:54:15
发表于 2013-02-18 16:54 |显示全部楼层
改成write没锁了, 结果还是这个鸟样, 就是上不去... 瓶颈在哪里...

论坛徽章:
15
射手座
日期:2014-11-29 19:22:4915-16赛季CBA联赛之青岛
日期:2017-11-17 13:20:09黑曼巴
日期:2017-07-13 19:13:4715-16赛季CBA联赛之四川
日期:2017-02-07 21:08:572015年亚冠纪念徽章
日期:2015-11-06 12:31:58每日论坛发贴之星
日期:2015-08-04 06:20:00程序设计版块每日发帖之星
日期:2015-08-04 06:20:00程序设计版块每日发帖之星
日期:2015-07-12 22:20:002015亚冠之浦和红钻
日期:2015-07-08 10:10:132015亚冠之大阪钢巴
日期:2015-06-29 11:21:122015亚冠之广州恒大
日期:2015-05-22 21:55:412015年亚洲杯之伊朗
日期:2015-04-10 16:28:25
发表于 2013-02-18 16:55 |显示全部楼层
本帖最后由 yulihua49 于 2013-02-18 16:57 编辑
linux_c_py_php 发表于 2013-02-18 16:49
嗯, 应该是printf干的, 尼玛stdout自带锁了.

我用:
./server >aaa 2>&1 &
不会有事吧?

服务器完全取消printf。
从客户端测试时间和流量。

论坛徽章:
4
水瓶座
日期:2013-09-06 12:27:30摩羯座
日期:2013-09-28 14:07:46处女座
日期:2013-10-24 14:25:01酉鸡
日期:2014-04-07 11:54:15
发表于 2013-02-18 17:03 |显示全部楼层
yulihua49 发表于 2013-02-18 16:55
我用:
./server >aaa 2>&1 &
不会有事吧?


没事, 不是打印语句的问题, 压力到一定程度线程就持续D状态了, 怎么找D在哪个系统调用里是关键... 你有什么办法吗, 不是应用层的不太好找.

论坛徽章:
4
水瓶座
日期:2013-09-06 12:27:30摩羯座
日期:2013-09-28 14:07:46处女座
日期:2013-10-24 14:25:01酉鸡
日期:2014-04-07 11:54:15
发表于 2013-02-18 17:13 |显示全部楼层
yulihua49 发表于 2013-02-18 16:55
我用:
./server >aaa 2>&1 &
不会有事吧?


目前进程的系统调用就只有read/write/accept/close/epool_ctl/epoll_wait了, 要慢肯定慢在其中一个的底层实现上, 是不是多线程epoll_wai同一个epfd达到了瓶颈了.

论坛徽章:
0
发表于 2013-02-18 17:39 |显示全部楼层
我不知道LZ现在做的是哪方面的测试,我目前在做的epoll的TCP新建能力测试,目前单进程做到了8.6万/秒连接接收,但是距离预期10W+还有距离

论坛徽章:
4
水瓶座
日期:2013-09-06 12:27:30摩羯座
日期:2013-09-28 14:07:46处女座
日期:2013-10-24 14:25:01酉鸡
日期:2014-04-07 11:54:15
发表于 2013-02-18 17:42 |显示全部楼层
eastany_op 发表于 2013-02-18 17:39
我不知道LZ现在做的是哪方面的测试,我目前在做的epoll的TCP新建能力测试,目前单进程做到了8.6万/秒连接接 ...


新建能力是指短连接能力吗, 求指教!

我在做基于epoll的EPOLLONESHOT的leader-follower性能测试, 目前关注长连接中.

论坛徽章:
0
发表于 2013-02-18 17:55 |显示全部楼层
回复 57# linux_c_py_php
不敢说指教。
目前为了获得峰值,连接设置保活,不拆。连接的业务短长都有,暂时只建不拆,所以比较简单单纯。
工作模式是ET,因为怕LT的频繁MOD会影响性能。就是想请教下LT的性能在高并发的场景中表现如何?
我的测试比较简单:Server端单进程epoll_wait 循环accept。客户端多线程来connect。
由于之前遇到瓶颈,一直怀疑accept的调用不够高效。后来摸索着改了几个linux内核关于tcp的内核参数,新建从5W上到了8W,但是目前又陷入瓶颈。还想多跟你交流交流。
   

论坛徽章:
4
水瓶座
日期:2013-09-06 12:27:30摩羯座
日期:2013-09-28 14:07:46处女座
日期:2013-10-24 14:25:01酉鸡
日期:2014-04-07 11:54:15
发表于 2013-02-18 18:05 |显示全部楼层
本帖最后由 linux_c_py_php 于 2013-02-18 18:08 编辑
eastany_op 发表于 2013-02-18 17:55
回复 57# linux_c_py_php
不敢说指教。
目前为了获得峰值,连接设置保活,不拆。连接的业务短长都有,暂 ...


具体介绍一下怎么优化accept能力的, 急需学习, 最好全面傻瓜一点...

方便的话加我QQ详细交流一下, 120848369.


我现在做的是多线程, 然后用了EPOLLONESHOT共享同一个epfd, 也就是一个leader-folllower结构的服务端.

我目前短连接accept才跑个2万多点, 怀疑是因为accpet和普通读写事件的处理抢夺线程不够用导致accpet速率不够快, 我今晚决定做独立的epoll_wait监听线程, 与普通工作线程池做一个区分, 这样估计可以高效一些, 需要试验看看效果.

论坛徽章:
0
发表于 2013-02-18 18:08 |显示全部楼层
回复 9# linux_c_py_php D状态是不可中断睡眠状态,主要出现在不可中断io操作的时候,比如磁盘写操作、网络io,你的测试过程中出现D状态,应该是senddata导致的,对于发送来说,qps 13000多已经不错了,把你接收和发送的数据改小一点,qps应该能够升上去。


   
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

SACC2019中国系统架构师大会

【数字转型 架构演进】SACC2019中国系统架构师大会,7折限时优惠重磅来袭!
2019年10月31日~11月2日第11届中国系统架构师大会(SACC2019)将在北京隆重召开。四大主线并行的演讲模式,1个主会场、20个技术专场、超千人参与的会议规模,100+来自互联网、金融、制造业、电商等领域的嘉宾阵容,将为广大参会者提供一场最具价值的技术交流盛会。

限时七折期:2019年8月31日前


----------------------------------------

大会官网>>
  

北京盛拓优讯信息技术有限公司. 版权所有 16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122
中国互联网协会会员  联系我们:help@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP