Python3简单爬虫抓取网页图片代码实例
更新时间：2019年08月26日 11:52:16 作者：瀛洲过客
这篇文章主要介绍了Python3简单爬虫抓取网页图片代码实例,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
现在网上有很多python2写的爬虫抓取网页图片的实例，但不适用新手（新手都使用python3环境，不兼容python2），
所以我用Python3的语法写了一个简单抓取网页图片的实例，希望能够帮助到大家，并希望大家批评指正。
import urllib.request
import re
import os
import urllib
#根据给定的网址来获取网页详细信息，得到的html就是网页的源代码
def getHtml(url):
page = urllib.request.urlopen(url)
html = page.read()
return html.decode('UTF-8')
def getImg(html):
reg = r'src="(.+?\.jpg)" pic_ext'
imgre = re.compile(reg)
imglist = imgre.findall(html)#表示在整个网页中过滤出所有图片的地址，放在imglist中
x = 0
path = 'D:\\test'
# 将图片保存到D:\\test文件夹中，如果没有test文件夹则创建
if not os.path.isdir(path):
os.makedirs(path)
paths = path+'\\' #保存在test路径下
for imgurl in imglist:
urllib.request.urlretrieve(imgurl,'{0}{1}.jpg'.format(paths,x)) #打开imglist中保存的图片网址，并下载图片保存在本地，format格式化字符串
x = x + 1
return imglist
html = getHtml("http://tieba.baidu.com/p/2460150866")#获取该网址网页详细信息，得到的html就是网页的源代码
print (getImg(html)) #从网页源代码中分析并下载保存图片
以上就是本文的全部内容，希望对大家的学习有所帮助，也希望大家多多支持脚本之家。
相关文章
Python seaborn数据可视化绘图(直方图,密度图,散点图)
这篇文章主要介绍了Python seaborn数据可视化绘图(直方图,密度图,散点图)，文章围绕主题展开详细的内容介绍，具有一定的参考价值，需要的朋友可以参考一下2022-07-07
今天小编就为大家分享一篇使用python进行拆分大文件的方法，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2018-12-12
在上一篇Flask 入门Web 微框架Hello Flask中，我们用 Flask 框架写了一个 Hello Flask 应用程序，我们了解到 Flask 框架简洁高效、可以快速上手，接下来将对 Flask 框架的各项功能详细的介绍一下，本篇文章介绍的是 Flask 的路由(Route),需要的朋友可以参考一下2021-11-11
本文为大家重点介绍如何通过 python 编码来实现我们的接口测试以及通过Pycharm的实际应用编写一个简单接口测试，感兴趣的可以了解一下2022-05-05
密码的使用最早可以追溯到古罗马时期，《高卢战记》有描述恺撒曾经使用密码来传递信息，即所谓的“恺撒密码”。本文将利用Python实现简易的凯撒密码，感兴趣的可以了解一下2022-09-09
enumerate()是python的内置函数,适用于python2.x和python3.x,这篇文章主要给大家介绍了关于Python中的enumerate函数使用方法的相关资料,文中通过代码介绍的非常详细,需要的朋友可以参考下2024-06-06
这篇文章主要为大家介绍了Python入门类和对象，具有一定的参考价值，感兴趣的小伙伴们可以参考一下，希望能够给你带来帮助2021-12-12
用python简单实现mysql数据同步到ElasticSearch的教程
今天小编就为大家分享一篇用python简单实现mysql数据同步到ElasticSearch的教程，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2018-05-05
今天小编就为大家分享一篇python自动识别文本编码格式代码，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2019-12-12
Python字典的基本用法实例分析【创建、增加、获取、修改、删除】
这篇文章主要介绍了Python字典的基本用法,结合具体实例形式分析了Python字典的创建、增加、获取、修改、删除等基本操作技巧与注意事项,需要的朋友可以参考下2019-03-03
最新评论