广告合作
  • 今日头条

    今日头条

  • 百度一下

    百度一下,你就知道

  • 新浪网

    新浪网 - 提供新闻线索,重大新闻爆料

  • 搜狐

    搜狐

  • 豆瓣

    豆瓣

  • 百度贴吧

    百度贴吧——全球领先的中文社区

  • 首页 尚未审核订阅工具 订阅

    为什么我的网站中的一些私密网页也被百度收录?

    来源:网络收集  点击:  时间:2024-02-15
    【导读】:
    百度蜘蛛,是百度搜索引擎的一个自动程序。它的作用是访问收集整理互联网上的网页、图片、视频等内容,然后分门别类建立索引数据库,使用户能在百度搜索引擎中搜索到您网站的网页、图片、视频等内容。方法/步骤1/4分步阅读

    百度蜘蛛工作

    百度蜘蛛对网页的抓取,是通过网页与网页之间的链接实现的。

    网页之间的链接类型,除了站点内部的页面链接之外,还有不同网站之间的互相链接。因此,某些网页即便通过您的网站内部链接无法访问到,但是,如果别人的网站上有指向这些页面的链接,那么这些页面还是会被百度蜘蛛检索出来,从而被收录。

    2/4

    百度蜘蛛的访问权限

    和普通用户是一样的,普通用户没有权限访问的内容,百度蜘蛛也没有权限访问这些页面内容。之所以看上去某些访问权限限制内容被百度收录,原因有两点:A. 权限限制是后来设置的,即该内容在百度蜘蛛访问时是没有权限限制的。

    B. 该内容有权限限制,但是由于网站安全漏洞问题,某些用户可以通过某些特殊路径直接访问到网址的权限内容。一旦这样的路径被公布在互联网上,则百度蜘蛛就会循着这条路径抓出受限内容,因此要及时修复网络漏洞问题,及时打补丁。

    3/4

    让我的网页全部或部分不被百度收录

    如果您不希望这些私密性内容被百度收录,可以设置一个Robots文件以限制您的网站全部网页或者部分目录下网页不被百度收录具体可以参考我之前写的这篇【如何让我的网页不被百度收录?】,里面详细指导了如何撰写Robots文件,希望帮助到您!

    4/4

    拒绝被收录需求

    如果您的拒绝被收录需求非常急迫,可以在反馈中心反馈,我们会尽快处理。

    以上信息是否解决了您的问题

    反馈中心网址:https://ziyuan.baidu.com/feedback#/

    注意事项

    以上信息是否解决了您的问题,欢迎留言讨论!!

    网站百度蜘蛛爬虫收录
    本文关键词:

    版权声明:

    1、本文系转载,版权归原作者所有,旨在传递信息,不代表看本站的观点和立场。

    2、本站仅提供信息发布平台,不承担相关法律责任。

    3、若侵犯您的版权或隐私,请联系本站管理员删除。

    4、文章链接:http://www.1haoku.cn/art_43365.html

    相关资讯

    ©2019-2020 http://www.1haoku.cn/ 国ICP备20009186号05-05 04:21:40  耗时:0.028
    0.0277s