epoll事件的问题

lxyfirst

在epoll的ET模式下，有时会发生如下的问题

1. epoll触发FD=A的事件 。
2.处理FD=A的事件并销毁A(即epoll_ctl_del(A)并close(A) ) 。
3.epoll再次触发FD=A的事件 。

如果这时候对象已经被删除或被重用，程序就会出现问题 。
哪位大侠解释下，不胜感激。

liujq110

原帖由 lxyfirst 于 2009-5-14 12:26 发表
在epoll的ET模式下，有时会发生如下的问题

1. epoll触发FD=A的事件 。
2.处理FD=A的事件并销毁A(即epoll_ctl_del(A)并close(A) ) 。
3.epoll再次触发FD=A的事件 。

如果这时候对象已经被删除或被重用， ...

没有明白什么意思

yangsf5

man 7 epoll

Q6  Will closing a file descriptor cause it to be removed from all epoll sets automatically?

       A6  Yes, but be aware of the following point.  A file descriptor is a reference to an open file description (see open(2)).  Whenever  a
           descriptor  is  duplicated via dup(2), dup2(2), fcntl(2) F_DUPFD, or fork(2), a new file descriptor referring to the same open file
           description is created.  An open file description continues to exist until all file descriptors referring to it have  been  closed.
           A  file  descriptor is removed from an epoll set only after all the file descriptors referring to the underlying open file descrip-
           tion have been closed (or before if the descriptor is explicitly removed using epoll_ctl() EPOLL_CTL_DEL).  This  means  that  even
           after a file descriptor that is part of an epoll set has been closed, events may be reported for that file descriptor if other file
           descriptors referring to the same underlying file description remain open.

cookis

step 3. 是你accept 之后了吧，否则是不可能出现的。


你一定要在close之前将fd 关联的东西释放掉，否则下一个connection 会重用fd

lxyfirst

就是因为释放了fd关联的对象，才发现了这个问题。
由于内部使用了对象指针数组做索引,创建fd时赋值 。
array[fd] = &handler ;

epoll触发事件时:
array[fd]->OnRead() ;
close(fd)　;
array[fd] = NULL ;

如果在上述处理后又触发了fd的事件，此时array[fd]为空，程序出错。

nginx在linux上也使用epoll，它的代码在事件上也做了特殊处理，防止这种现象，它称之为"stale event”
        c = event_list.data.ptr;

        instance = (uintptr_t) c & 1;
        c = (ngx_connection_t *) ((uintptr_t) c & (uintptr_t) ~1);

        rev = c->read;

        if (c->fd == -1 || rev->instance != instance) {

            /*
             * the stale event from a file descriptor
             * that was just closed in this iteration
             */

            ngx_log_debug1(NGX_LOG_DEBUG_EVENT, cycle->log, 0,
                           "epoll: stale event %p", c);
            continue;
        }

xinglp

二次开发nginx？

lxyfirst

也许我的理解有偏颇，这个"stale event"也可能是指某个fd的事件中关闭了其他fd的对象，从而需要检查受影响fd对象的状态。

我learnc

如同楼上所说，如果你从EPOLL中删除了这个FD，并且CLOSE了。那么它是不可能再触发的，只有下一个连接来了以后，新建了一个连接又重新用了这个FD，才解释得通。

在连接不断地建立又断开的时候，为了不频繁地分配销毁，我加了一个逻辑处理。如果fd = a触发，并且
if ( arr[a]->busy && (now - arr[a]->active_tm > 10 ) ) {
   close ( a );
   clear ( arr[a] );
} else if ( !arr[a]->busy ) {
   close ( a );
   clear ( arr[a] );
}

arr中指向的内存我回收到了内存池，如果连接再来的时候我直接从内存池取一个出来重用，这样就可以避免客户端频繁连接断开带来问题。但是缺点就是如果客户端连接断开的数目很巨大的时候，程序占用的SOCKET数目会太多。。