免费注册	查看新帖 \|


平台论坛博客文库

› 论坛 › 程序设计 › Python › 用urllib实现的一个"类爬虫程序"

1 23 / 3 页

最近访问板块

发新帖

楼主: reiase

上一主题

下一主题

用urllib实现的一个"类爬虫程序" [复制链接]

论坛徽章:: 0

21楼 [报告]

发表于 2008-08-16 15:26 |只看该作者

嗯，建议你把if...elif结构改成for...in...(tuple)
另外getUrlList和run可以合并到一起，并且不用传参数，直接用self.***就可以了。

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

22楼 [报告]

发表于 2008-08-17 17:02 |只看该作者

这句总出错为什恶魔？？
rootpageworker = pageWorker(output,sys.argv[1],accepts,3)

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

23楼 [报告]

发表于 2008-08-17 17:26 |只看该作者

原帖由 wangyouqi 于 2008-8-17 17:02 发表
这句总出错为什恶魔？？
rootpageworker = pageWorker(output,sys.argv[1],accepts,3)

怎么提示的？

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

24楼 [报告]

发表于 2008-08-18 18:59 |只看该作者

原帖由 wangyouqi 于 2008-8-17 17:02 发表
这句总出错为什恶魔？？
rootpageworker = pageWorker(output,sys.argv[1],accepts,3)

八成是命令行参数有问题
url要带协议，比如http://g.cn

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

25楼 [报告]

发表于 2008-08-18 23:26 |只看该作者

学习python只是为了学习专业软件的脚本语言，实现操作的自动化，对网络上的东西不是很感兴趣

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

26楼 [报告]

发表于 2008-08-18 23:44 |只看该作者

为啥我见到的Python程序很多都是跟网络有关的呢？

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

1 23 / 3 页

发新帖

Chinaunix › 论坛 › 程序设计 › Python › 用urllib实现的一个"类爬虫程序"

北京盛拓优讯信息技术有限公司. 版权所有京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP