广告合作
  • 今日头条

    今日头条

  • 百度一下

    百度一下,你就知道

  • 新浪网

    新浪网 - 提供新闻线索,重大新闻爆料

  • 搜狐

    搜狐

  • 豆瓣

    豆瓣

  • 百度贴吧

    百度贴吧——全球领先的中文社区

  • 首页 尚未审核订阅工具 订阅

    如何使用webscraper爬取图片并下载

    来源:网络收集  点击:  时间:2024-04-01
    【导读】:
    用webscraper插件爬取图片并且自动下载下来工具/原料more谷歌浏览器webscraper插件方法/步骤1/12分步阅读

    webscraper插件地址https://pan.baidu.com/s/1EK_V4k57pjfO6GLr8DpGdw

    下载完成后安装在谷歌浏览器上

    2/12

    打开我们需要爬虫的网址(这里我们拿新浪图片为例子)我们按下F12打开开发者工具,选择webscraper选项

    3/12

    我们先创建一个项目,点击Create new sitemap-Create sitemap选项

    4/12

    上面点击完之后会出现这样的界面,Sitemap name随便取个名字,我这里就填image,而Start URL里面填写需要爬取的地址,也就是我们新浪图片的网址,我们复制浏览器地址栏里面的地址,填写完之后我们单击按钮Create Sitemap

    5/12

    上面步骤执行完后会出现一个蓝色按钮,点击它一下

    6/12

    这个时候,id随便取一个名称,我这里取img,type选择Image类型,然后点击select按钮

    7/12

    点击完select按钮,开发者工具会出现一个框,当出现这个框时,再将鼠标移动到图片区域,当绿色区域覆盖图片的时候,我们就点击一下

    8/12

    然后再点击第二个图片,当点完第二个图片,所有图片插件都会自动选择好

    9/12

    这个时候,就按下蓝色按钮Done selecting!,并且勾选Multiple(多条数据的意思),然后再勾选Download image(这个是下载图片的意思),Delay(延迟数,因为加载图片需要时间)那一栏填写毫秒数,网速慢的人可以多填一些,我这里就填写1000,最后点击蓝色按钮Save selector保存

    10/12

    现在就可以开始爬取了,点击上面的Create new sitemap-Scrape,然后点击蓝色按钮,就可以开始爬取了

    11/12

    耐心等待图片下载,图片正在一张张地下载

    12/12

    这时候我们再去下载路径看一下,图片都下载到下载路径里面,

    注意事项

    网速慢的人延迟写大点

    爬虫WEBSCRAPER谷歌插件使用新浪图片下载
    本文关键词:

    版权声明:

    1、本文系转载,版权归原作者所有,旨在传递信息,不代表看本站的观点和立场。

    2、本站仅提供信息发布平台,不承担相关法律责任。

    3、若侵犯您的版权或隐私,请联系本站管理员删除。

    4、文章链接:http://www.1haoku.cn/art_397258.html

    相关资讯

    ©2019-2020 http://www.1haoku.cn/ 国ICP备20009186号05-06 19:29:01  耗时:0.027
    0.0271s