免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 7997 | 回复: 4
打印 上一主题 下一主题

BeautifulSoup中find的结果是什么格式 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2012-11-26 11:46 |只看该作者 |倒序浏览
最近做批量查询百度收录的小程序,使用BeautifulSoup的find查找第一位,
  1. tabletag = soup.find('table', {'id': '1'})
复制代码
然后又查询其中的span
  1. spantag = tabletag.find('span', {'class': 'g'})
复制代码
然后我想用域名查询是否在这个spantag中,但老是不成功,请问这是怎么回事,这个spantag难道不是字符形式吗?

spantag的结果是<span class="g"> <b>www.baidu.com</b>/ 2012-11-25  </span>
  1. domain = www.baidu.com

  2. if domain in spantag:
  3.     print 'yes'
  4. else:
  5.     print 'no'
复制代码
这样的结果老是返回none

论坛徽章:
0
2 [报告]
发表于 2012-11-26 13:31 |只看该作者
domain = www.baidu.com    ===> domain = 'www.baidu.com'

再试试

论坛徽章:
0
3 [报告]
发表于 2012-11-26 14:11 |只看该作者
1.spantag = tabletag.find('span', {'class': 'g'})
所得到的结果,不是普通python中的str,(好像是)是NavigableString。

相关的BeautifulSoup官网文档:
BeautifulSoup - find(name, attrs, recursive, text, **kwargs)

2. 你所说的:
<span class="g"> <b>www.baidu.com</b>/ 2012-11-25  </span>
估计是通过
print spantag
所看到的。
所以,你的程序,应该,最好改为:

  1.     domain = "www.baidu.com";
  2.     spantagUnicode = unicode(spantag);

  3.     if domain in spantagUnicode:
  4.         print 'yes';
  5.     else:
  6.         print 'no';
复制代码
3.相关内容,感兴趣的话,可以参考我写的:
【总结】Python的第三方库BeautifulSoup的使用心得

论坛徽章:
0
4 [报告]
发表于 2012-11-26 14:17 |只看该作者
回复 2# darkn3ss


    这个是我发帖的时候写错了,加上引号也没用的。完整代码如下:
  1. #coding=utf-8
  2. import urllib2
  3. from BeautifulSoup import BeautifulSoup

  4. proxy = urllib2.ProxyHandler({'http': 'http://zhangyanan:mengxiang@192.168.16.189:8080'})
  5. opener = urllib2.build_opener(proxy)
  6. urllib2.install_opener(opener)

  7. req = urllib2.Request('http://www.baidu.com/s?wd=www.chinaunix.com')
  8. f = urllib2.urlopen(req)
  9. content = f.read()
  10. baiduencoding = 'utf-8'
  11. soup = BeautifulSoup(content, fromEncoding=baiduencoding)

  12. tabletag = soup.find('table', {'id': '1'})
  13. spantag = tabletag.find('span', {'class': 'g'})
  14. cache = spantag
  15. domain = 'www.chinaunix.com'

  16. print cache

  17. if domain in cache:
  18.     print 'yes'
  19. else:
  20.     print 'no'
复制代码

论坛徽章:
0
5 [报告]
发表于 2012-11-26 14:35 |只看该作者
本帖最后由 alexkh 于 2012-11-26 14:35 编辑

回复 3# crifan


1、对的,我是直接print spantag得到的。

2、现在使用unicode()已经可以返回正确结果了。多谢!

3、博客写的不错,刚才就在看。
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP