请教PCIE设备的问题

superfisha

PCIE设备（上面运行操作系统）插在linux服务器上，如果在服务器运行期间，把PCIE设备重启，会有什么结果？ 相当于热插拨吗？PCIE设备自身的重启对于linux服务器来说有什么影响呢？

我用自己的PCIE卡做了试验，重启PCIE卡时linux服务器打印
Uhhuh. NMI received for unknown reason 20 on CPU 0.
Dazed and confused, but trying to continue
Do you have a strange power saving mode enabled?

并且在PCIE卡启动完成之后无法再访问卡上的内存了，卡上面设置了一段内存可以通过PCIE访问的，重新加载卡的驱动也不行。

请高手支招啊，多谢！

accessory

你的卡是自己做的,还是买人家已经做好的? 如果是后者,好好看看硬件说明书.
我见到的重启一般都是通过驱动来写一个卡上的端口来实现的. 没见过用串口来做的. 也许实现上有些地方不一样.
在访问一个PCI设备之前,需要给它分配可用的I/O OR MEMORY空间.这个过程一般是BIOS(或者OS)来做的.本版前面有个帖子专门讨论配置PCI卡的问题. 可以看看.
看你的现象,好像是卡重启后,原来获得的地址空间无效了.同时OS又没有分配新的.

accessory

这要看LZ你的PCIE到底是什么类型的设备了.
我觉得重启和热插拔还是不一样的. 对LINUX OS来说,就是PCIE设备突然不能用了阿. 比如如果PCIE设备是网卡,那么网络在设备重启时肯定断了.
NMI出现的有点奇怪,也许是ACPI部分没做好.
卡重启后出现的问题也是重启功能没做好.

一句话,要看是什么卡,怎么做的.

superfisha

原帖由 accessory 于 2010-1-8 09:07 发表
这要看LZ你的PCIE到底是什么类型的设备了.
我觉得重启和热插拔还是不一样的. 对LINUX OS来说,就是PCIE设备突然不能用了阿. 比如如果PCIE设备是网卡,那么网络在设备重启时肯定断了.
NMI出现的有点奇怪,也许是A ...

谢谢这位大哥，是自己学习用的一块PCIE卡，上面有一颗CPU，在主机第一次启动之后（这时卡已经启动好），是可以通过主机的IO操作（readl、writel）来访问卡上的内存
的，但是一旦把卡重启（在通过卡上的串口重启的，卡会重新初始化所有的东西），主机就访问不了那段空间了，请问这种重启和主机第一次启动时卡的启动有什么区别呢？ 现在还是只停留在PCI probe的阶段，卡还没跑什么业务，只是为了学习PCI写个驱动测试一下。在probe里面是这样获取IO空间地址的
        base = pci_resource_start(pdev, 0);
        dev_io_mem = (unsigned long)ioremap_nocache(base,pci_resource_len(pdev, 0));

当卡重启后，对dev_io_mem的readl出来的值都是-1，是无效的值。就算重新加载驱动再probe一次也不行。

superfisha

原帖由 accessory 于 2010-1-7 18:18 发表
你的卡是自己做的,还是买人家已经做好的? 如果是后者,好好看看硬件说明书.
我见到的重启一般都是通过驱动来写一个卡上的端口来实现的. 没见过用串口来做的. 也许实现上有些地方不一样.
在访问一个PCI设备之前 ...

有劳大哥凌晨三点还在为我的帖子操心，我想也是你说的这个原因，但是有没有办法让PCI bios来为PCIE卡重新分配IO、MEM空间呢？

emmoblin

这种情况应该在你的驱动中避免，所有的pci设备都应该有设备状态寄存器。
当发现设备busy或者不可用的时候就不要做任何处理了。

两个都是异步的系统，只能通过状态来标示设备的状态。根据不同的状态做不同的处理。