[基于Epoll内置Leader-Follower服务端实现, 已可达50万echo qps（全新支持Lua啦）]

linux_c_py_php

yulihua49 发表于 2013-02-25 14:23
终于把这个史上最屌的服务器搞定。
用select，支持1024个连接，达到70000qps。
我的机器只有2核，线程 ...

我来学习一下。

linux_c_py_php

半同步半异步的, main线程负责accept,  sched线程负责select检测事件, 然后加锁从fdset中去掉, 然后通过next域构造的队列把连接送给worker线程, 在worker线程里做handle完成后再加锁恢复fdset.

那个beat[2]没用吧...

iw1210

yulihua49 发表于 2013-02-25 14:23
终于把这个史上最屌的服务器搞定。
用select，支持1024个连接，达到70000qps。
我的机器只有2核，线程 ...

好了？ 什么原因？

linux_c_py_php

可以跑15万左右, 开了40多个压力才顶上去, 估计是锁太厉害了.

不过把I/O放到多线程里去做提高了I/O并发性, 值得借鉴. 之前我做的hsha把I/O都放在异步层了, 异步线程CPU直接就跑满到瓶颈了.

你可以把worker里对事件集合的取消操作以及main线程对事件集合的添加操作都做成Pipe+queue, fdset的操作全部让sched线程来做, 可以避免掉同步fdset的代价, 应该能稍微好点.

iw1210

回复 153# linux_c_py_php


    你在测试 yulihua49  的select？

linux_c_py_php

iw1210 发表于 2013-02-25 15:24
回复 153# linux_c_py_php

是的, 他把server做成了hsha了.

iw1210

linux_c_py_php 发表于 2013-02-25 15:27
是的, 他把server做成了hsha了.

测试结果怎么样？他做好了么？我说的select方案可行吧

iw1210

有个疑问用select就行了，为什么还出现epoll，iocp什么的？

linux_c_py_php

iw1210 发表于 2013-02-25 16:03
有个疑问用select就行了，为什么还出现epoll，iocp什么的？

select只能管FD_SETSIZE之内的fd, 进程受限啊哥.

yulihua49

linux_c_py_php 发表于 2013-02-25 14:57
半同步半异步的, main线程负责accept,  sched线程负责select检测事件, 然后加锁从fdset中去掉, 然后通过nex ...

有用。通过管道通知sched。

select里边的fds，必须在进入时设置好。如果你新设置了fds，就要通知它退出来，重新装入。


在局域网，3.9W qps

1. Cpu0  :  9.5%us, 37.1%sy,  0.0%ni, 49.5%id,  0.0%wa,  0.0%hi,  4.0%si,  0.0%st
   
2. Cpu1  :  9.4%us, 37.5%sy,  0.0%ni, 48.7%id,  0.4%wa,  0.0%hi,  4.0%si,  0.0%st
   
3. Mem:   8059424k total,  2772824k used,  5286600k free,   309748k buffers
   
4. Swap:  8191992k total,        0k used,  8191992k free,  2019996k cached
   
5. 
   
6.   PID USER      PR  NI  VIRT  RES  SHR S %CPU %MEM    TIME+  COMMAND                                          
   
7. 1990 sdbc      20   0  104m 7992  532 R 46.1  0.1   0:52.50 server                                            
   
8. 1982 sdbc      20   0  104m 7992  532 S  7.3  0.1   0:09.09 server                                            
   
9. 1984 sdbc      20   0  104m 7992  532 R  7.3  0.1   0:09.11 server                                            
   
10. 1986 sdbc      20   0  104m 7992  532 S  7.3  0.1   0:09.06 server                                            
    
11. 1987 sdbc      20   0  104m 7992  532 S  7.3  0.1   0:09.07 server                                            
    
12. 1989 sdbc      20   0  104m 7992  532 S  7.3  0.1   0:09.11 server                                            
    
13. 1983 sdbc      20   0  104m 7992  532 S  7.0  0.1   0:09.12 server                                            
    
14. 1985 sdbc      20   0  104m 7992  532 S  7.0  0.1   0:09.09 server                                            
    
15. 1988 sdbc      20   0  104m 7992  532 S  7.0  0.1   0:09.13 server                                            
    
16. 3252 sdbc      20   0 15176 1344  948 R  0.3  0.0   0:00.12 top

复制代码