请教：PCIE总线挂死后，CPU还能继续内存访问么？

xs3c

为啥lspci中能看到内存控制器呢？有相应的pci总线号。看起来像是cpu内部通信也是基于PCIE协议的？FSB跟PCIE总线硬件上是否有啥关联？

个人理解： lspci 看到的是HOST bridge。host bridge负责FSB和pci/pcie信号的转化。

humjb_1983

xs3c 发表于 2014-06-13 12:38
个人理解： lspci 看到的是HOST bridge。host bridge负责FSB和pci/pcie信号的转化。

感谢！
但是如下这些是啥设备？不知还清楚~~
ff:0f.0 System peripheral: Intel Corporation Sandy Bridge Integrated Memory Controller Registers (rev 07)
ff:0f.1 System peripheral: Intel Corporation Sandy Bridge Integrated Memory Controller RAS Registers (rev 07)
ff:0f.2 System peripheral: Intel Corporation Sandy Bridge Integrated Memory Controller Target Address Decoder 0 (rev 07)
ff:0f.3 System peripheral: Intel Corporation Sandy Bridge Integrated Memory Controller Target Address Decoder 1 (rev 07)
ff:0f.4 System peripheral: Intel Corporation Sandy Bridge Integrated Memory Controller Target Address Decoder 2 (rev 07)
ff:0f.5 System peripheral: Intel Corporation Sandy Bridge Integrated Memory Controller Target Address Decoder 3 (rev 07)
ff:0f.6 System peripheral: Intel Corporation Sandy Bridge Integrated Memory Controller Target Address Decoder 4 (rev 07)
ff:10.0 System peripheral: Intel Corporation Sandy Bridge Integrated Memory Controller Channel 0-3 Thermal Control 0 (rev 07)
ff:10.1 System peripheral: Intel Corporation Sandy Bridge Integrated Memory Controller Channel 0-3 Thermal Control 1 (rev 07)
ff:10.2 System peripheral: Intel Corporation Sandy Bridge Integrated Memory Controller ERROR Registers 0 (rev 07)
ff:10.3 System peripheral: Intel Corporation Sandy Bridge Integrated Memory Controller ERROR Registers 1 (rev 07)
ff:10.4 System peripheral: Intel Corporation Sandy Bridge Integrated Memory Controller Channel 0-3 Thermal Control 2 (rev 07)
ff:10.5 System peripheral: Intel Corporation Sandy Bridge Integrated Memory Controller Channel 0-3 Thermal Control 3 (rev 07)
ff:10.6 System peripheral: Intel Corporation Sandy Bridge Integrated Memory Controller ERROR Registers 2 (rev 07)
ff:10.7 System peripheral: Intel Corporation Sandy Bridge Integrated Memory Controller ERROR Registers 3 (rev 07)

另外，还有如下这个，看起来像QPI相关的，但为啥也专到PCIE总线上了？
7f:08.0 System peripheral: Intel Corporation Sandy Bridge QPI Link 0 (rev 07)
7f:08.3 System peripheral: Intel Corporation Sandy Bridge QPI Link Reut 0 (rev 07)
7f:08.4 System peripheral: Intel Corporation Sandy Bridge QPI Link Reut 0 (rev 07)
7f:09.0 System peripheral: Intel Corporation Sandy Bridge QPI Link 1 (rev 07)
7f:09.3 System peripheral: Intel Corporation Sandy Bridge QPI Link Reut 1 (rev 07)
7f:09.4 System peripheral: Intel Corporation Sandy Bridge QPI Link Reut 1 (rev 07)

smalloc

http://bbs.chinaunix.net/forum.php?mod=viewthread&tid=1985518
一个总线出错的例子,不过,可以不死机的,但如果总线错误那是严重的高速设备错误.可以考虑禁用设备.

guobamantou

pcie设备出问题后，比如一直不处理请求，会导致相应类型的buffer满，如果cpu持续访问，之前看intel的手册也提到，可能导致cpu的流水线死锁。而且这种问题也的确会遇到，最后cpu的cat error引脚会有指示。如果能做到后续只访问内存，是可以不挂的。至于内存控制器挂到pcie上，应该就是配置内存控制器的时候相关，访存不至于走 pcie吧，也不太确定？

guobamantou

还有，调试时部分pcie路径访问挂死比较常见，整个pcie都挂死比较少见。

q1208c

或许 这个 内存控制器 只是给 PCIe 设备使用的.
因为 DMA的设备是需要直接访问内存的. 而内存控制器如果跟 PCIe控制器没有直接关系, 那访问可能会有问题.

humjb_1983

smalloc 发表于 2014-06-13 23:00
http://bbs.chinaunix.net/forum.php?mod=viewthread&tid=1985518
一个总线出错的例子,不过,可以不死机的, ...

感谢！
您的例子中，系统并没有死机，不过类似之处在于，这个也是在操作寄存器的时候出现的，看来此类问题还是比较多的。我看Intel给的硬件勘误表中也有类似的错误。

humjb_1983

guobamantou 发表于 2014-06-14 00:58
pcie设备出问题后，比如一直不处理请求，会导致相应类型的buffer满，如果cpu持续访问，之前看intel的手册也 ...

感谢兄指点~，很有道理。
intel勘误表中好像提到了类似的故障。
目前我们想在这种情况下将物理内存镜像导出来做深入分析，如果pcie总线挂死后，内存还能正常访问的话，应该还有机会。

humjb_1983

guobamantou 发表于 2014-06-14 01:06
还有，调试时部分pcie路径访问挂死比较常见，整个pcie都挂死比较少见。

按兄台的意思，部分pcie路径挂死最后的现象是啥？

humjb_1983

q1208c 发表于 2014-06-14 13:30
或许 这个 内存控制器 只是给 PCIe 设备使用的.
因为 DMA的设备是需要直接访问内存的. 而内存控制器如果跟 ...

感谢！！
对于内存控制器与pcie的关系，我更倾向于CPU内部通信可能也采用了pcie协议，硬件上应该独立，当然需要权威专家确认~~