post的网页，想return第二页的信息怎么弄？

wqjwftcaqr

这个网址，进去后就点第一个块版‘法律’
这是个post的网页，请各位高手，教我一下，怎么样翻回第二页的信息？
http://vip.chinalawinfo.com/Newlaw2002/chl/index.asp

下面是我前段时间网上帮助我的朋友给我的代码，不知道怎么样应用于这个网址。

1. #coding=utf-8
   
2. 
   
3. import urllib
   
4. import urllib2
   
5. import httplib
   
6. import cookielib
   
7. 
   
8. class loginPageGeter:
   
9.    
   
10.     httpcookie = ''
    
11. 
    
12.     #构造函数
    
13.     def __init__(self):
    
14.         cookie = cookielib.CookieJar()
    
15.         self.httpcookie = urllib2.HTTPCookieProcessor(cookie)
    
16.    
    
17.     #登录函数
    
18.     def login(self, url, params):
    
19.         try:
    
20.             params = urllib.urlencode(params)
    
21.             req = urllib2.Request(url, params)
    
22.             opener = urllib2.build_opener(self.httpcookie)
    
23.             fp = opener.open(req)
    
24.             return fp.read()
    
25.         except:
    
26.             return False
    
27.    
    
28.     #post数据
    
29.     def post(self, url, params):
    
30.         try:
    
31.             params = urllib.urlencode(params)
    
32.             req = urllib2.Request(url, params)
    
33.             opener = urllib2.build_opener(self.httpcookie)
    
34.             fp = opener.open(req)
    
35.             return fp.read()
    
36.         except:
    
37.             return False
    
38. 
    
39. if __name__=='__main__':
    
40.     loginObj = loginPageGeter()
    
41. 
    
42.     #登录
    
43.     print '正在登录...'.decode('utf-8')
    
44.     url = 'http://xuxb.v2.local/member/login.php'
    
45.     params = {'username':'test01', 'password':'test', 'act':'login'}
    
46.     loginObj.login(url, params)
    
47.    
    
48.     #给用户发10条消息
    
49.     for i in range(1, 11):
    
50.         print ('%s\t正在发送消息...' % i).decode('utf-8')
    
51.         url = 'http://xuxb.v2.local/member/send_message.php'
    
52.         params = {'friendId':'1790251', 'message':'机器自动发送', 'act':'add'}
    
53.         loginObj.post(url, params)
    

复制代码

t6760915

和get一样,post也会得到响应内容的

1.             params = urllib.urlencode(params)
   
2.             req = urllib2.Request(url, params)
   
3.             opener = urllib2.build_opener(self.httpcookie)
   
4.             fp = opener.open(req)
   
5.             print fp.read()

复制代码

wqjwftcaqr

不懂啊，哪位能帮我看看我的实际例子，教我下参数怎么填进去？

另外再帮我推荐一本对 采集有帮助的 书，我也不知道看什么书好。

t6760915

1. #coding=utf-8
   
2. 
   
3. import urllib
   
4. import urllib2
   
5. import httplib
   
6. import cookielib
   
7. 
   
8. class poster:
   
9.    
   
10.     httpcookie = ''
    
11. 
    
12.     #构造函数
    
13.     def __init__(self):
    
14.         cookie = cookielib.CookieJar()
    
15.         self.httpcookie = urllib2.HTTPCookieProcessor(cookie)
    
16.    
    
17.     #post数据
    
18.     def doPost(self, url, params):
    
19.         try:
    
20.             params = urllib.urlencode(params)
    
21.             req = urllib2.Request(url, params)
    
22.             opener = urllib2.build_opener(self.httpcookie)
    
23.             fp = opener.open(req)
    
24.             return fp.read()
    
25.         except:
    
26.             return False
    
27. 
    
28.     #析构函数
    
29.     def __del__(self):
    
30.         self.httpcookie = ''
    
31. 
    
32. if __name__=='__main__':
    
33.     pObj = poster()
    
34.    
    
35.     url = 'http://vip.chinalawinfo.com/Newlaw2002/chl/result.asp'
    
36.     params = {'PreSearchWhere':'效力级别=%#XA01%', 'ResultID':'1', 'CurrentPage':'5', 'AllPageCount':'30', 'Page':'5', 'PageSize':'40', 'orderby':'2', 'jd':'', 'RdIsSHowMess':'', 'RdIsSHow':''}
    
37.    
    
38.     newparams = {}
    
39.     for key,val in params.items():
    
40.         key = key.decode('utf-8', 'ignore').encode('gbk', 'ignore')
    
41.         val = val.decode('utf-8', 'ignore').encode('gbk', 'ignore')
    
42.         newparams[key] = val
    
43. 
    
44.     html = pObj.doPost(url, newparams)
    
45. 
    
46.     fp = open('a.html', 'w')
    
47.     fp.write(html)
    
48.     fp.close()

复制代码

我就晕了,那代码是我给你的.

我稍微改了下抓取的页面截图是这样的...

他的页次是page,我抓的第5页所以就写的5,你可以循环抓,这个变量不断变化就可以了

luffy.deng

可不可以回去看看http协议再出来问问题？什么都不懂  整天问些工作上的问题，你给不给钱啊？

wqjwftcaqr

可不可以回去看看http协议再出来问问题？什么都不懂  整天问些工作上的问题，你给不给钱啊？
luffy.deng 发表于 2010-05-31 17:08

    我水平有限，恩，是想看看http协议不知道有没有这方面的好书，是工作上的事情，都比较急，一时没到这水平。
钱嘛，可以给，小问题一百块一个，大问题付不起。

最后我不好意思各位，麻烦了，希望大家抱着 教是最好的学 的心态或者助人为乐，来帮帮我，其实我愿意学，并不怎么懒，一时没方法。

wqjwftcaqr

我就晕了,那代码是我给你的.

我稍微改了下抓取的页面截图是这样的...

他的页次是page,我抓的第5页所以 ...
t6760915 发表于 2010-05-31 16:41

    万分感谢，请为我的工作需要推荐一本书吧？（采集各种网站信息）

t6760915

1. 熟悉urllib,os,sys这些模块就可以了,好象还真没有这方面的书

复制代码

luffy.deng

从你第一次问这样的问题 就建议你看一下http协议，找个工具看下header。网上http协议 资料一大把，firebug这样的工具更是一大堆。如果你肯拿出一个周的时间研究一下http协议，不可能到现在还搞不清楚什么是post提交。如果你曾经试图研究一下别人给你的代码，对与下面这个post数据怎么也得猜个八九不离十吧？
PreSearchWhere=%D0%A7%C1%A6%BC%B6%B1%F0%3D%25%23XC02%25&ResultID=1&CurrentPage=1&AllPageCount=144&Page=3&PageSize=40&orderby=2&jd=&RdIsSHowMess=&RdIsSHow=
说实话这样的问题跟python就没什么关系，只是python有个urllib2库用着方便而已。

jjj137

其实如果不涉及cookie的话，post直接用urllib就能搞定了吧……