【实测比较half-sync-half-async模式与leader-follower模式的性能与场景(直播)】

lxyscls_cu

看不懂，权当抢个沙发坐吧{:3_188:}

lxyscls_cu

16核 至强5645么...{:3_189:}

windoze

第2条可以开一个per-connection memory pool，STL那些容器加个allocator就差不多了。
如果还在用C++03，可以改用Boost.Container替换STL容器，它们都支持scoped_allocator_adaptor，可以挽救container-of-container，TMD这个东西烦了我好久。

实话说libevent里面那些宏实在让人没食欲，就算是纯粹出于心情考虑也要换一下，libev或者更加C++一点的Boost.Asio都还不错。

PS.  越发觉得Clay是个不错的语言

yulihua49

linux_c_py_php 发表于 2013-02-15 23:30
比如epoll_wait的时候是不可以从其他线程做epoll_ctl修改event的. ...

没明白。
据我试验，多个线程在epoll_wait的时候，其它多个线程是可以同时或不同时（不使用任何互斥锁）、安全的进行epoll_ctl的 。
这是我们系统常态的运用方法，进行高吞吐量的OLTP（每秒数千次至几万次），没有任何问题。
我感觉，epoll_wait内部已经实现了L/F模型，可以多个线程进行epoll_wait,同时多个线程进行epoll_ctl。一个event只提交给一个线程，从未观察到提交给多个线程情况（如果出现，我们的应用就崩溃了）。

windoze

epoll是线程安全的
http://linux-kernel.2935.n7.nabb ... libaio-td94856.html

Using the interfaces this way is pretty much their entire point. They'd be
almost useless if you couldn't use them in this way.

yulihua49

windoze 发表于 2013-02-16 15:54
epoll是线程安全的
http://linux-kernel.2935.n7.nabb ... -libaio-td94856.htm ...

所以我质疑楼主的那个论断。
当然，多线程epoll_wait，多线程epoll_ctl，会造成复杂的状态（但这是个高效的用法），你是否能驾驭，是个问题。
我猜，楼主的论断可能来自于驾驭问题，而非epoll本身。
因此，我们希望系统能高效运作，又要避免驾驭复杂状态，采用了封装的办法，把epoll这个魔鬼封装在一个模块中，形成框架，应用逻辑完全不知道它的存在。

linux_c_py_php

原来epoll_ctl是线程安全的, 那LF必胜啊.

楼上说了个啥玩意, 别整那么专业, 还驾驭不驾驭的, 你能驾驭了个啥似的.

框架是框架, 测试是测试, 代码里我连应用逻辑和底层逻辑都没划分, 直接写死的代码, 谈啥JB复杂状态, 我连状态机都没上.

linux_c_py_php

就算epoll_wait自己是LF的, 但程序设计也要自己做LF, 因为你保不准A线程监听到可读, 然后开始read, B线程接下来也监听到可读导致了并发read.

只能说epoll_ctl是线程安全的, 并且可能epoll_wait是可以防惊群的?

yulihua49 发表于 2013-02-16 15:42
没明白。
据我试验，多个线程在epoll_wait的时候，其它多个线程是可以同时或不同时（不使用任何互斥锁） ...

yulihua49

linux_c_py_php 发表于 2013-02-16 17:49
因为你保不准A线程监听到可读, 然后开始read, B线程接下来也监听到可读导致了并发read.

...

前边说了，不会发生这种情况。
epoll_wait确实是防惊群的。
前边的话，没有贬义，请多包涵。

linux_c_py_php

yulihua49 发表于 2013-02-16 15:42
没明白。
据我试验，多个线程在epoll_wait的时候，其它多个线程是可以同时或不同时（不使用任何互斥锁） ...

应用层的leader-follower肯定要自己做, epoll只是检测event的一个API, 为什么你们的程序可以无锁epoll_wait? 我认为这是不可能的, 肯定是只有Leader才可以epoll_wait, 你没看清楚你们的代码吧, 要么就是每个线程一个独立的epoll各自维护一批fd.


再有一个问题就是, epoll_wait的同时, 另外一个线程epoll_ctl, 这件事是线程安全的, 这个线程安全的概念是否能做到这个效果: A线程epoll-wait, 但没有任何事件发生并挂起, B线程epoll_ctl恢复一个fd的监听, 并且fd立即可读/可写, 你们知道epoll_wait能否监听到这个事件吗? 有这个试验吗?