免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 5040 | 回复: 1
打印 上一主题 下一主题

请问使用代理情况下,如何用python访问"www.sina.com.cn" [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2008-05-28 17:31 |只看该作者 |倒序浏览
我的机器必须设置代理,才能访问网页,请问这种情况下,如何编程用python访问网页内容.(需要在我的机器上运行)

论坛徽章:
0
2 [报告]
发表于 2008-05-29 08:59 |只看该作者
这是我下载文件的代码,你可以参考参考

## Download files

import sys, os, urllib2

PATH = r'D:\SF\test'

def buildproxy():
    '''
    build a new opener that uses a proxy requiring authorization
    '
''
    
    username = 'test'
    password = 'test1'

    proxy_info = {
    'user' : username,
    'pass' : password,
    'host' : 'proxy,
    'port' : 8080
    }

    # build a new opener that uses a proxy requiring authorization
    proxy_support = urllib2.ProxyHandler({'http' : \
    'http://%(user)s:%(pass)s@%(host)s:%(port)d' % proxy_info})
    opener = urllib2.build_opener(proxy_support, urllib2.HTTPHandler)
    #print 'http://%(user)s:%(pass)s@%(host)s:%(port)d' % proxy_info
    
    # install it
    urllib2.install_opener(opener)

def main():
    
    if len(sys.argv) != 2: exit('Please specify the URL to download')

    buildproxy()
    
    target = sys.argv[1]
    filename = os.path.join(PATH, urllib2.unquote(target.split('/')[-1]))
##    print filename
    try:
        content = urllib2.urlopen(target).read()
        open(filename,'wb').write(content)
        print 'Save file to %s' % filename
    except:
        print 'Failed to get file'

if __name__ == '__main__':
    main()
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP