免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
› 论坛 › 程序设计 › Python › response = urllib2.open中的问题
最近访问板块 发新帖
查看: 2651 | 回复: 6
打印 上一主题 下一主题

response = urllib2.open中的问题 [复制链接]

super皮波

论坛徽章:
46
2015小元宵徽章 日期:2015-03-06 15:58:18羊年新春福章 日期:2015-04-14 10:37:422015年亚洲杯之阿曼 日期:2015-04-14 10:41:50NBA常规赛纪念章 日期:2015-05-04 22:32:03NBA季后赛大富翁 日期:2015-05-04 22:34:11菠菜明灯 日期:2015-05-04 22:35:49新奥尔良黄蜂 日期:2015-05-04 22:49:2315-16赛季CBA联赛之广夏 日期:2015-12-11 15:02:342015年亚洲杯之巴勒斯坦 日期:2015-03-04 19:56:562015年亚洲杯之阿联酋 日期:2015-03-04 11:19:04休斯顿火箭 日期:2015-03-02 16:32:11纽约尼克斯 日期:2015-03-02 16:09:04
跳转到指定楼层
1楼 [收藏(0)] [报告]
发表于 2014-12-22 17:59 |只看该作者 |倒序浏览
本帖最后由 super皮波 于 2014-12-22 18:00 编辑

请教一个问题，response.read()为何读不出div标签？多谢了
aswjh

论坛徽章:
0
2楼 [报告]
发表于 2014-12-22 19:06 |只看该作者
是不是页面压缩了?用page[:3]==b'\x1F\x8B\x08'判断一下
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
super皮波

论坛徽章:
46
2015小元宵徽章 日期:2015-03-06 15:58:18羊年新春福章 日期:2015-04-14 10:37:422015年亚洲杯之阿曼 日期:2015-04-14 10:41:50NBA常规赛纪念章 日期:2015-05-04 22:32:03NBA季后赛大富翁 日期:2015-05-04 22:34:11菠菜明灯 日期:2015-05-04 22:35:49新奥尔良黄蜂 日期:2015-05-04 22:49:2315-16赛季CBA联赛之广夏 日期:2015-12-11 15:02:342015年亚洲杯之巴勒斯坦 日期:2015-03-04 19:56:562015年亚洲杯之阿联酋 日期:2015-03-04 11:19:04休斯顿火箭 日期:2015-03-02 16:32:11纽约尼克斯 日期:2015-03-02 16:09:04
3楼 [报告]
发表于 2014-12-22 19:18 |只看该作者
问的有点问题，response.read中不能读取需要执行javascript生成动态图像的代码
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
super皮波

论坛徽章:
46
2015小元宵徽章 日期:2015-03-06 15:58:18羊年新春福章 日期:2015-04-14 10:37:422015年亚洲杯之阿曼 日期:2015-04-14 10:41:50NBA常规赛纪念章 日期:2015-05-04 22:32:03NBA季后赛大富翁 日期:2015-05-04 22:34:11菠菜明灯 日期:2015-05-04 22:35:49新奥尔良黄蜂 日期:2015-05-04 22:49:2315-16赛季CBA联赛之广夏 日期:2015-12-11 15:02:342015年亚洲杯之巴勒斯坦 日期:2015-03-04 19:56:562015年亚洲杯之阿联酋 日期:2015-03-04 11:19:04休斯顿火箭 日期:2015-03-02 16:32:11纽约尼克斯 日期:2015-03-02 16:09:04
4楼 [报告]
发表于 2014-12-22 23:33 |只看该作者
回复 2# aswjh
兄弟再说的详细点呗，我是新手


   
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
aswjh

论坛徽章:
0
5楼 [报告]
发表于 2014-12-23 14:05 |只看该作者
python能读取的只是网页的文本,js动态生成的是没法读到的.
要么根据js代码用python模拟生成,要么找一个能执行js的库来抓取,比如PhantomJS,selenium,我都没用过,网上找找资料看吧.
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
super皮波

论坛徽章:
46
2015小元宵徽章 日期:2015-03-06 15:58:18羊年新春福章 日期:2015-04-14 10:37:422015年亚洲杯之阿曼 日期:2015-04-14 10:41:50NBA常规赛纪念章 日期:2015-05-04 22:32:03NBA季后赛大富翁 日期:2015-05-04 22:34:11菠菜明灯 日期:2015-05-04 22:35:49新奥尔良黄蜂 日期:2015-05-04 22:49:2315-16赛季CBA联赛之广夏 日期:2015-12-11 15:02:342015年亚洲杯之巴勒斯坦 日期:2015-03-04 19:56:562015年亚洲杯之阿联酋 日期:2015-03-04 11:19:04休斯顿火箭 日期:2015-03-02 16:32:11纽约尼克斯 日期:2015-03-02 16:09:04
6楼 [报告]
发表于 2014-12-23 15:06 |只看该作者
回复 5# aswjh
好的，多谢了，我找找资料！！


   
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
bikong0411

论坛徽章:
13
双鱼座 日期:2013-10-23 09:30:05数据库技术版块每日发帖之星 日期:2016-04-20 06:20:00程序设计版块每日发帖之星 日期:2016-03-09 06:20:002015亚冠之塔什干火车头 日期:2015-11-02 10:07:452015亚冠之德黑兰石油 日期:2015-08-30 10:07:07数据库技术版块每日发帖之星 日期:2015-08-28 06:20:00数据库技术版块每日发帖之星 日期:2015-08-05 06:20:002015年迎新春徽章 日期:2015-03-04 09:57:09辰龙 日期:2014-12-03 14:45:52酉鸡 日期:2014-07-23 09:46:23亥猪 日期:2014-03-13 08:46:22金牛座 日期:2014-02-11 09:36:21
7楼 [报告]
发表于 2014-12-24 10:00 |只看该作者
casperjs是个不错的选择
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP