我们经常会在网上搜索井下载图片，然而一张一张地下载就太麻烦了，本案例

就是通过网络爬虫技术， 一次性下载该网站所有的图片并保存 。
网站图片下载并保存

将指定网站的 .jpg 和 .png 格式的图片全部下载井保存在自己本地新建的 images 文件夹中 。

import requests,os

from bs4 import BeautifulSoup

from urllib.request import urlopen

url = 'http://www.tooopen.com/img/87.aspx'

html = requests.get(url)

html.encoding="utf-8"

sp = BeautifulSoup(html.text, 'html.parser')
# 建立images目录保存图片

images_dir="E:\\images\\"

if not os.path.exists(images_dir):

    os.mkdir(images_dir)
# 取得所有 <a> 和 <img> 标签

all_links=sp.find_all(['a','img']) 

for link in all_links:

    # 读取 src 和　href 属性内容

    src=link.get('src')

    href = link.get('href')

    attrs=[src,src]

    for attr in attrs:

        # 读取　.jpg 和　.png 檔

        if(attr != None)and(('.jpg' in attr)or('.png' in attr)):

            # 设置图片文件完整路径

            full_path = attr

            filename = full_path.split('/')[-1]  # 取得图片名

            ext = filename.split('.')[-1]  #取得扩展名

            filename = filename.split('.')[-2] #取得主文件名

            if('jpg' in ext):

                filename = filename + '.jpg'

            else:

                filename = filename + '.png'

            print(attr)

            # 保存图片

            try:

                image = urlopen(full_path)

                f = open(os.path.join(images_dir,filename),'wb')

                f.write(image.read())

                f.close()

            except:

                print("{} 无法读取!".format(filename))

print("当前页图片下载完了")
/static/image/logo.png

logo.png 无法读取!

/static/image/logo.png

logo.png 无法读取!

https://www.tooopen.com/static/ad/1500X50-viw.png

https://www.tooopen.com/static/ad/1500X50-viw.png

https://www.tooopen.com/static/ad/1500X50-too.png

https://www.tooopen.com/static/ad/1500X50-too.png

http://img08.tooopen.com/20190807/tooopen_wk_131356135671827.jpg

tooopen_wk_131356135671827.jpg 无法读取!

http://img08.tooopen.com/20190807/tooopen_wk_131356135671827.jpg

tooopen_wk_131356135671827.jpg 无法读取!

http://img08.tooopen.com/20190807/tooopen_wk_131356135689691.jpg

tooopen_wk_131356135689691.jpg 无法读取!

http://img08.tooopen.com/20190807/tooopen_wk_131356135689691.jpg

tooopen_wk_131356135689691.jpg 无法读取!

http://img08.tooopen.com/20190807/tooopen_wk_131355135547978.jpg

tooopen_wk_131355135547978.jpg 无法读取!

http://img08.tooopen.com/20190807/tooopen_wk_131355135547978.jpg

tooopen_wk_131355135547978.jpg 无法读取!

http://img08.tooopen.com/20191204/tooopen_sl_135027502737700.jpg

tooopen_sl_135027502737700.jpg 无法读取!

http://img08.tooopen.com/20191204/tooopen_sl_135027502737700.jpg

tooopen_sl_135027502737700.jpg 无法读取!

http://img08.tooopen.com/20191122/tooopen_sl_102334233455130.jpg

tooopen_sl_102334233455130.jpg 无法读取!

http://img08.tooopen.com/20191122/tooopen_sl_102334233455130.jpg

tooopen_sl_102334233455130.jpg 无法读取!

http://img08.tooopen.com/20191121/tooopen_sl_095522552259405.jpg

tooopen_sl_095522552259405.jpg 无法读取!

http://img08.tooopen.com/20191121/tooopen_sl_095522552259405.jpg

tooopen_sl_095522552259405.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093830383053575.jpg

tooopen_sl_093830383053575.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093830383053575.jpg

tooopen_sl_093830383053575.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093534353474034.jpg

tooopen_sl_093534353474034.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093534353474034.jpg

tooopen_sl_093534353474034.jpg 无法读取!

http://img08.tooopen.com/20191205/tooopen_sl_134926492663201.jpg

tooopen_sl_134926492663201.jpg 无法读取!

http://img08.tooopen.com/20191205/tooopen_sl_134926492663201.jpg

tooopen_sl_134926492663201.jpg 无法读取!

http://img08.tooopen.com/20191122/tooopen_sl_102328232897349.jpg

tooopen_sl_102328232897349.jpg 无法读取!

http://img08.tooopen.com/20191122/tooopen_sl_102328232897349.jpg

tooopen_sl_102328232897349.jpg 无法读取!

http://img08.tooopen.com/20191121/tooopen_sl_162428242838278.jpg

tooopen_sl_162428242838278.jpg 无法读取!

http://img08.tooopen.com/20191121/tooopen_sl_162428242838278.jpg

tooopen_sl_162428242838278.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093827382762634.jpg

tooopen_sl_093827382762634.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093827382762634.jpg

tooopen_sl_093827382762634.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093529352941470.jpg

tooopen_sl_093529352941470.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093529352941470.jpg

tooopen_sl_093529352941470.jpg 无法读取!

http://img08.tooopen.com/20191006/tooopen_sl_09550855847444.jpg

tooopen_sl_09550855847444.jpg 无法读取!

http://img08.tooopen.com/20191006/tooopen_sl_09550855847444.jpg

tooopen_sl_09550855847444.jpg 无法读取!

http://img08.tooopen.com/20191119/tooopen_sl_115948594813304.jpg

tooopen_sl_115948594813304.jpg 无法读取!

http://img08.tooopen.com/20191119/tooopen_sl_115948594813304.jpg

tooopen_sl_115948594813304.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_16270727715545.jpg

tooopen_sl_16270727715545.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_16270727715545.jpg

tooopen_sl_16270727715545.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093822382227436.jpg

tooopen_sl_093822382227436.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093822382227436.jpg

tooopen_sl_093822382227436.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_092538253863445.jpg

tooopen_sl_092538253863445.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_092538253863445.jpg

tooopen_sl_092538253863445.jpg 无法读取!

http://img08.tooopen.com/20190924/tooopen_sl_095323532347706.jpg

tooopen_sl_095323532347706.jpg 无法读取!

http://img08.tooopen.com/20190924/tooopen_sl_095323532347706.jpg

tooopen_sl_095323532347706.jpg 无法读取!

http://img08.tooopen.com/20191121/tooopen_sl_101744174437980.jpg

tooopen_sl_101744174437980.jpg 无法读取!

http://img08.tooopen.com/20191121/tooopen_sl_101744174437980.jpg

tooopen_sl_101744174437980.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_094151415155508.jpg

tooopen_sl_094151415155508.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_094151415155508.jpg

tooopen_sl_094151415155508.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093819381985689.jpg

tooopen_sl_093819381985689.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_093819381985689.jpg

tooopen_sl_093819381985689.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_092534253435074.jpg

tooopen_sl_092534253435074.jpg 无法读取!

http://img08.tooopen.com/20191115/tooopen_sl_092534253435074.jpg

tooopen_sl_092534253435074.jpg 无法读取!

https://www.tooopen.com/static/image/tooopen-2w.png

https://www.tooopen.com/static/image/tooopen-2w.png

当前页图片下载完了

吴裕雄--天生自然python学习笔记：编写网络爬虫代码获取指定网站的图片的更多相关文章

  1. 吴裕雄--天生自然python学习笔记：python爬虫PM2.5 实时监测显示器

    PM2.5 对人体的健康影响很大,所以空气中的 PM2.5 实时信息受到越来越多的关注. Python 的 Pandas 套件不但可以自动读取网页中的表格 数据 , 还可对数据进行修改.排序等处理,也 ...

  2. 吴裕雄--天生自然PYTHON学习笔记：python自动登录网站

    打开 www. 5 l eta . com 网站,如果己经通过某用户名进行了登录,那么先退出登录 . 登录该网站 的步骤一般如下 : ( 1 )单击右上角的“登录”按钮. ( 2 )先输入账号. ( ...

  3. 吴裕雄--天生自然python学习笔记：Python MongoDB

    MongoDB 是目前最流行的 NoSQL 数据库之一,使用的数据类型 BSON(类似 JSON). PyMongo Python 要连接 MongoDB 需要 MongoDB 驱动,这里我们使用 P ...

  4. 吴裕雄--天生自然python学习笔记：Python3 OS 文件/目录方法

    os 模块提供了非常丰富的方法用来处理文件和目录.常用的方法如下表所示: 序号 方法及描述 1 os.access(path, mode) 检验权限模式 2 os.chdir(path) 改变当前工作 ...

  5. 吴裕雄--天生自然python学习笔记：python 用pyInstaller模块打包文件

    要想在没有安装 Python 集成环境的电脑上运行开发的 Python 程序,必须把 Python 文件打包成 .exe 格式的可执行 文件. Python 的打包工作 PyInstaller 提供了 ...

  6. 吴裕雄--天生自然python学习笔记：python 文件批量查找

    在多个文本文件中查找 我们首先来学习文本文件的查找字符 . 我们通过 os.walk 扩大查找范围, 查找指定目录和子目录下的文件. 应用程序总览 读取 当 前目录及子目录下的所有 PY 和 txt ...

  7. 吴裕雄--天生自然python学习笔记：python 用 Tesseract 识别验证码

    用 Selenium 包实现网页自动化操作的案例中,发现很多网页都因 需输入图形验证码而导致实验无法进行 . 解决的办法就是对验证码进行识别 . 识 别的方法之 一 是通过图形处理包将验证码的大部分背 ...

  8. 吴裕雄--天生自然python学习笔记：pandas模块强大的数据处理套件

    用 Python 进行数据分析处理,其中最炫酷的就属 Pa ndas 套件了 . 比如,如果我 们通过 Requests 及 Beautifulsoup 来抓取网页中的表格数据 , 需要进行较复 杂的 ...

  9. 吴裕雄--天生自然python学习笔记：Beautiful Soup 4.2.0模块

    Beautiful Soup 是一个可以从HTML或XML文件中提取数据的Python库.它能够通过你喜欢的转换器实现惯用的文档导航,查找,修改文档的方式.Beautiful Soup会帮你节省数小时 ...

随机推荐

  1. html分页自适应居中；css设置分页自适应居中

    制作网页列表的分页必不可少,显示的列表条数也不一样,让我们一起来看看如何让分页标签根据给定的分页自动居中呢. 对<ul>标签设置样式为:{ display: table margin:40 ...

  2. Maven高级：01.maven分模块构建&&02.私服的应用

    IntelliJ IDEA 2018.3.6 x64 07 Maven高级:01.maven分模块构建(上) 07 Maven高级:01.maven分模块构建(中) 07 Maven高级:01.mav ...

  3. IDEA中使用Lombok时候，getter,setter注解不生效/每次重启后才生效

    Relevance.java代码如下: import lombok.AllArgsConstructor; import lombok.Builder; import lombok.Data; imp ...

  4. java8的lambda过滤list遍历集合，排序

    1.根据属性过滤list List<AllManagerBean> testLists = broadCastRoomMapper.allManagerlist(); List<Al ...

  5. P2P平台爆雷不断到底是谁的过错？

    早在此前,范伟曾经在春晚上留下一句经典台词,"防不胜防啊".而将这句台词用在当下的P2P行业,似乎最合适不过了.就在这个炎热夏季,P2P行业却迎来最冷冽的寒冬. 引发爆雷潮的众多P ...

  6. Filezilla Xshell SecureFX Win10等无法拖放文件（本地或线上）解决办法

    一.win10系统Filezilla Xshell SecureFX等无法拖放文件到线上服务器解决办法: 1.按窗口键+R,打开“运行”对话框:输入regedit回车 2.在注册表编辑器地址栏输入以下 ...

  7. 刷题34. Find First and Last Position of Element in Sorted Array

    一.题目说明 题目是34. Find First and Last Position of Element in Sorted Array,查找一个给定值的起止位置,时间复杂度要求是Olog(n).题 ...

  8. html title属性内容换行方法（静态页面）

    鼠标经过悬停于对象时提示内容(title属性内容)换行排版方法,html title 换行方法总结. html的title属性默认是显示一行的,这里介绍两种换行方法为大家分享使用. 一.直接title ...

  9. lr cc安装后提示“内部出现错误，无法创建文件夹”的解决办法

    好多人在使用lr过程中提示“内部出现错误,无法创建文件夹”,今天MacW小编给大家带来了解决的方法,一起来看看吧! 1.此问题主要是用户权限的问题. 下载这个shell 脚本,此 shell 脚本可自 ...

  10. screen 用法

    登陆Linux服务器跑程序, 担心ssh连接被中断后,导致跑了一半的任务被强制终止. 一个比较好的办法是使用 screen 命令, 下面是使用说明 类型 命令 备注 创建 screen 查看 scre ...