Python urlopen 使用小示例

更新时间：2008年09月06日 14:31:49 作者：

打开一个网页获取所有的内容、获取Http头、使用代理等小结

一、打开一个网页获取所有的内容

from urllib import urlopen
doc = urlopen("http://www.baidu.com").read()
print doc

二、获取Http头

from urllib import urlopen
doc = urlopen("http://www.baidu.com")
print doc.info()
print doc.info().getheader('Content-Type')

三、使用代理

1. 查看环境变量

print ""n".join(["%s=%s" % (k, v) for k, v in os.environ.items()])
print os.getenv("http_proxy")

2. 设置环境变量

import os
os.putenv("http_proxy", "http://proxyaddr:<port>")

3. 使用代理

# Use http://www.someproxy.com:3128 for http proxying
proxies = {'http': 'http://www.someproxy.com:3128'}
filehandle = urllib.urlopen(some_url, proxies=proxies)
# Don't use any proxies
filehandle = urllib.urlopen(some_url, proxies={})
# Use proxies from environment - both versions are equivalent
filehandle = urllib.urlopen(some_url, proxies=None)
filehandle = urllib.urlopen(some_url)

您可能感兴趣的文章:

Django 浅谈根据配置生成SQL语句的问题
今天小编就为大家分享一篇Django 浅谈根据配置生成SQL语句的问题，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
2018-05-05
Python+matplotlib实现简单曲线的绘制
Matplotlib是Python的绘图库，它能让使用者很轻松地将数据图形化，并且提供多样化的输出格式。本文将利用matplotlib绘制简单的曲线图，感兴趣的朋友可以学习一下
2022-04-04
将Python脚本打包成exe文件
大家好，本篇文章主要讲的是将Python脚本打包成exe文件，感兴趣的同学赶快来看一看吧，对你有帮助的话记得收藏一下
2022-02-02
python机器学习pytorch自定义数据加载器
这篇文章主要为大家介绍了python机器学习pytorch自定义数据加载器使用示例学习，有需要的朋友可以借鉴参考下，希望能够有所帮助，祝大家多多进步，早日升职加薪
2022-10-10
python爬虫爬取监控教务系统的思路详解
这篇文章主要介绍了python爬虫监控教务系统，主要实现思路是对已有的成绩进行处理，变为list集合，本文通过实例代码给大家介绍的非常详细,需要的朋友可以参考下
2020-01-01
Python Pandas数据分析工具用法实例
这篇文章主要介绍了Python Pandas数据分析工具用法实例,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
2020-11-11
python 合并文件的具体实例
提供了很多个文件，需要对文件分析，如果每次读取多个文件，造成很多麻烦，所以需要对源文件进行合并预处理。
2013-08-08
Python列表切片操作实例总结
这篇文章主要介绍了Python列表切片操作,结合实例形式总结分析了Python列表切片常见操作技巧与注意事项,需要的朋友可以参考下
2019-02-02
python图像处理-利用一行代码实现灰度图抠图
这篇文章主要介绍了python图像处理-利用一行代码实现灰度图抠图，具有很好的参考价值，希望对大家有所帮助。如有错误或未考虑完全的地方，望不吝赐教
2022-05-05
分享7个 Python 实战项目练习
这篇文章主要介绍了分享7个 Python 实战项目代码,经过Python3.6.4调试通过的代码，就具一点的参考价值，需要的小伙伴可以参考一下
2022-03-03