python 获取网页编码方式实现代码
更新时间:2017年03月11日 16:26:00 投稿:lqh
这篇文章主要介绍了python 获取网页编码方式实现代码的相关资料,需要的朋友可以参考下
python 获取网页编码方式实现代码
<span style="font-family: Arial, Helvetica, sans-serif; background-color: rgb(255, 255, 255);"> </span><span style="font-family: Arial, Helvetica, sans-serif; background-color: rgb(255, 255, 255);"> python开发,自动化获取网页编码方式用到了chardet库,字符集检测,这个类在python2.7中没有,需要在官网上下载。 这里我下载好了chardet-2.3.0.tar.gz压缩包文件,只需要将压缩包文件解压后的chardet文件放到python安装包下的 python27/lib/site-packages/下,就可以了。</span>
然后import chardet
下面写了一个自动化检测的函数供检测Url连接,然后返回网页url的编码方式。
import chardet #字符集检测 import urllib url="http://www.jd.com" def automatic_detect(url): content=urllib.urlopen(url).read() result=chardet.detect(content) encoding=result['encoding'] return encoding urls=['http://www.baidu.com','http://www.163.com','http://dangdang.com'] for url in urls: print url,automatic_detect(url)
上面用到了chardet类的detect方法,返回字典,然后取出编码方式encoding
感谢阅读,希望能帮助到大家,谢谢大家对本站的支持!
相关文章
Python使用requests模块发送http请求的方法介绍
Python Requests是一个 HTTP 库,它允许我们向 Web 服务器发送 HTTP 请求,并获取响应结果,本文将会详细介绍Python requests模块如何发送http请求,文中有相关的代码示例,需要的朋友可以参考下2023-06-06解决pycharm19.3.3安装pyqt5找不到designer.exe和pyuic.exe的问题
这篇文章给大家介绍了pycharm19.3.3安装pyqt5&pyqt5-tools后找不到designer.exe和pyuic.exe以及配置QTDesigner和PyUIC的问题,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧2021-04-04
最新评论