广告合作
  • 今日头条

    今日头条

  • 百度一下

    百度一下,你就知道

  • 新浪网

    新浪网 - 提供新闻线索,重大新闻爆料

  • 搜狐

    搜狐

  • 豆瓣

    豆瓣

  • 百度贴吧

    百度贴吧——全球领先的中文社区

  • 首页 尚未审核订阅工具 订阅

    Python批量获取一辈子看不完的磁力链接

    来源:网络收集  点击:  时间:2024-05-08
    【导读】:
    下面简述100行Python批量获取各位老师学习资源的磁力链接,保证你一辈子都看不完工具/原料morePython3环境电脑联网方法/步骤1/5分步阅读

    导入模块

    requests 用于获取网络请求

    etree 用于分析网页元素,提取需要的信息

    Pool 用于开启多线程,加快信息获取速率

    pickle 将Python获取的信息存储在本地方便下次调用,避免多次获取重复数据

    re 正则表达式,匹配和提取网页中的信息

    os 用于创建文件夹等系统操作

    2/5

    获取所有老师的名字和其对应的主页网址

    get_actresses_list 从演员总页面获取演员名称和其主页网址,返回一个列表

    get_all_actress_list 通过多线程方式或前num页演员总页面的演员名称和其主页网址,最后通过pickle模块保存在本地

    3/5

    从老师主页获取影片编号和其影片的网址

    这里是判断当前页里是否有“下一页”,有就提取完当前页后跳转到下一页继续提取,直至提取所有影片

    4/5

    经过分析发现影片网页里的磁力链接是动态获取的,因此这里分两次请求,第一个获取影片网页,从中提取gid,第二次再向网站根据编号获取该影片的所有磁力链接,请求中还要带上第一次请求获取的gid

    5/5

    最后将所有步骤组合起来就是了

    注意事项

    分享本技术仅作为学习,禁止用于非法用途或盈利,本人概不负责

    PYTHON爬虫磁力链接
    本文关键词:

    版权声明:

    1、本文系转载,版权归原作者所有,旨在传递信息,不代表看本站的观点和立场。

    2、本站仅提供信息发布平台,不承担相关法律责任。

    3、若侵犯您的版权或隐私,请联系本站管理员删除。

    4、文章链接:http://www.1haoku.cn/art_712974.html

    相关资讯

    ©2019-2020 http://www.1haoku.cn/ 国ICP备20009186号05-05 13:04:03  耗时:0.027
    0.0271s