Python3简单爬虫抓取网页图片代码实例
作者：瀛洲过客 发布时间：2021-08-28 21:56:49
标签：Python,3,爬虫,抓取,网页,图片
现在网上有很多python2写的爬虫抓取网页图片的实例，但不适用新手（新手都使用python3环境，不兼容python2），
所以我用Python3的语法写了一个简单抓取网页图片的实例，希望能够帮助到大家，并希望大家批评指正。
import urllib.request
import re
import os
import urllib
#根据给定的网址来获取网页详细信息，得到的html就是网页的源代码
def getHtml(url):
page = urllib.request.urlopen(url)
html = page.read()
return html.decode('UTF-8')
def getImg(html):
reg = r'src="(.+?\.jpg)" pic_ext'
imgre = re.compile(reg)
imglist = imgre.findall(html)#表示在整个网页中过滤出所有图片的地址，放在imglist中
x = 0
path = 'D:\\test'
# 将图片保存到D:\\test文件夹中，如果没有test文件夹则创建
if not os.path.isdir(path):
os.makedirs(path)
paths = path+'\\' #保存在test路径下
for imgurl in imglist:
urllib.request.urlretrieve(imgurl,'{0}{1}.jpg'.format(paths,x)) #打开imglist中保存的图片网址，并下载图片保存在本地，format格式化字符串
x = x + 1
return imglist
html = getHtml("http://tieba.baidu.com/p/2460150866")#获取该网址网页详细信息，得到的html就是网页的源代码
print (getImg(html)) #从网页源代码中分析并下载保存图片
来源：https://www.cnblogs.com/roboot/p/11410323.html
0
投稿猜你喜欢
本文实例讲述了JS实现淘宝支付宝网站的控制台菜单效果。分享给大家供大家参考。具体如下：这是一款支付宝网站中的控制台总菜单，可实现动画效果的显- 1.较复杂的查询操作1.1 参数占位符 #{} 和 ${}#{}:预处理符，如将id=#{2}替换为id=?，然后使用2替换?。${}:替换
- 一个最最简单的例子：绘制一个从 0 到 360 度完整的 SIN 函数图形import numpy as npimport matplotl
- PyQt的文本操作的继承关系：QTextBrowser ( QtGui.QTextEdit)其中QTextEdit具有的功能函数：copy(
- 不错，这个是一个文章详细页，没有左右两栏布局，不过这里我重点要讲的是合理的布局，在稍后的文章中我会详细的介绍浮动元素。好，回到刚才的话题，大
- 最近在学习python网络编程这一块，在写简单的socket通信代码时，遇到了struct这个模块的使用，当时不太清楚这到底有和作用，后来查
- 1 什么是嵌套循环所谓嵌套循环就是一个外循环的主体部分是一个内循环。内循环或外循环可以是任何类型，例如 while 循环或 for 循环。
- 前言临近期末做了一个商品销售管理系统，分享下，全部源码在码云，需要自取，博客只分享部分代码（太多了）。数据库的建立我们使用Navicat P
- 1.go已经提供了锁，为什么还需要atomic原子操作?1.加锁代价比较高，耗时多，需要上下文切换。加锁解锁在代码层实现，而代码是运行在用户
- 如下所示：select a1,a2,a1+a2 a,a1*a2 b,a1*1.0/a2 c from bb_sb把a表的a1,a2列相加作为
- python修改大数据文件时，如果全加载到内存中，可能会导致内存溢出。因此可借用如下方法，将分件分段读取修改。with open('
- 如何实现质数求和生活中很多问题是需要用数学来解决的，比如说要是做一栋房子，各方面的数据都要计算，要用多少材料，长宽高多少等，简单地说，运算就
- 本文实例为大家分享了PHP实现简易计算器的具体代码，供大家参考，具体内容如下老规矩，先上GIF动态图，看个效果，如果符合你的项目或者确定你要
- 一年中秋至 又见圆月时导语假设农历八月十五，程序员错过了今年的中秋圆月。▼程序员的苦只有他们寄几知道bug，bug，bug，bug，bug，
- 文章摘要本文简单说明了FLV文件的格式，以此为出发点，使用 Python 实现FLV视频的拼接。一.FLV文件格式关于FLV文件格式的解析网
- 我的第一个用于生产环境的perl脚本,虽然不是很优秀,但也迈出了扎实的一步 :)领导有任务,给一批IP列表,ping每一台机器,如果没有响应
- （一）深入浅出理解索引结构 实际上，您可以把索引理解为一种特殊的目录。微软的SQL SERVER提供了两种索引：聚集索引（clus
- 学了这么长时间的Pygame，一直想写个游戏实战一下。看起来很简单的游戏，写其来怎么这么难。最初想写个俄罗斯方块，想了很长时间如何实现，想来
- 1. 导入各种模块基本形式为：import 模块名from 某个文件 import 某个模块2. 导入数据（以两类分类问题为例，即numCl
- 如下所示：def usage(): print(' * usage:') print(' *
