Chinaunix

标题: SMP下的Linux接收网络数据包的问题 [打印本页]

作者: ustcwizard 时间: 2013-05-06 11:52
标题: SMP下的Linux接收网络数据包的问题
本帖最后由 ustcwizard 于 2013-05-06 11:53 编辑

假设计算机有两个核，core A 和 core B。某个时刻，网卡上到来了两个数据包 P1 和 P2，
1. 这两个数据包可能分别交给 core A 和 core B 接收吗？
2. 如果分别交给 core A 和 core B 接收，在接收数据包时，内核会根据 P1 和 P2 的内容更新一些公共数据，
这时需要做内核同步吗（公共数据的更新会因此出错）？

这个问题的背景是写一个netfilter模块做过滤。

作者: chishanmingshen 时间: 2013-05-06 12:28
回复 1# ustcwizard

不开rps的话，应该是同一个。个人理解，呵呵，

作者: lenky0401 时间: 2013-05-06 12:33
1，完全可能。
2，公共数据的更新自然需要做加锁互斥，但一般都会采用per-cpu机制吧。
看你的具体情况ne。

作者: daniel_11 时间: 2013-05-06 17:35
本帖最后由 daniel_11 于 2013-05-06 17:36 编辑

这东西貌似涉及RPS/RFS， IRQ Affinity，IRQ balance等等，大坑一个。。。lz保重。
不过，公共数据保护是必须的。

作者: 瀚海书香 时间: 2013-05-07 08:45
回复 1# ustcwizard
如果存在全局共享的变量改动，使用锁来保证；如果只存在基于流的变量改动，使用google的RFS patch，将同一个数据量的数据包放到同一个cpu上处理，使用percpu变量。

作者: bluempire 时间: 2013-05-07 16:29
好问题，顶一下。

作者: kwest 时间: 2013-05-08 16:46
网卡的接收中断可以通过中断控制器分发给不同的CPU，而数据包的接收队列是放在一个per-CPU的全局变量上的，core-A和core-B可以同时处理网卡收上来的不同的数据包。如果公共的数据需要同步，比如说接收到数据报文统计，很显然要用spin lock来保证。

作者: mordorwww 时间: 2013-05-09 09:18
硬中断的负载均衡没有意义，还是看软中断的负载均衡

作者: anyhit 时间: 2015-01-05 17:39
回复 8# mordorwww
关键问题是软中断是per cpu的吧。所以设计理念是谁触发谁执行。而触发者就是硬中断

欢迎光临 Chinaunix (http://bbs.chinaunix.net/)