Categories


Tags


为什么我的网站中的一些私密网页也会被百度收录?

Baiduspider对网页的抓取,是通过网页与网页之间的链接实现的。

网页之间的链接类型,除了站点内部的页面链接之外,还有不同网站之间的互相链接。因此,某些网页即便通过您的网站内部链接无法访问到,但是,如果别人的网站上有指向这些页面的链接,那么这些页面还是会被搜索引擎所收录。

百度Spider的访问权限,和普通用户是一样的。因此,普通用户没有权限访问的内容,Spider也没有权限访问。之所以看上去某些访问权限限制内容被百度收录,原因有两点:

  A. 该内容在Spider访问时是没有权限限制的,但抓取之后,内容的权限发生了变化

  B. 该内容有权限限制,但是由于网站安全漏洞问题,导致用户可以通过某些特殊路径直接访问。而一旦这样的路径被公布在互联网上,则Spider就会循着这条路径抓出受限内容

如果您不希望这些私密性内容被百度收录,一方面可以通过Robots协议加以限制;另一方面,也可以通过反馈中心反馈给我们进行解决。


Public @ 2020-06-19 15:55:52

360搜索网页质量白皮书发布上线!

亲爱的站长朋友们:基于搜索引擎生态及用户体验的大背景,360搜索制定了一套判断网页质量的标准。为给站长朋友们提供建议指南,指导网站的内容建设,促进更多高质量原创优质内容的产生,构建良性的互联网内容生态。我们特发布了《360搜索网页质量白皮书》,欢迎大家下载参考!    作为国内第二大搜索引擎,360搜索致力于为广大网民提供信息检索服务,并通过一系列策略,努力将更多优质

Public @ 2014-04-26 16:22:45

关于百度快照问题的若干说明

一直以来,部分站长对百度快照的更新时间都存在一些误解,认为网站的快照更新时间与网站的权重状态存在一定关系,快照更新越频繁,网站的权重越高,反之,越低。而实际上,网站快照的更新频率与权重并不存在任何直接的关系。百度快照为什么会更新?首先,需要澄清一下网页的抓取频率和快照的更新频率是完全不同的两个概念。每一个被百度收录的网站,baiduspider都会根据其网站内容更新的频率不断的检查有无新网页产生,

Public @ 2015-06-17 15:34:26

怎样做SEO有利于搜索引擎索引收录(2)

怎样做SEO有利于搜索引擎索引收录,即如何构建便于搜索引擎识别、索引、展现的移动网站。以下将从域名、服务器、加载速度、站点结构、URL结构、PC站与移动站适配、网站被动抓取、网页筛选建库8个方面来分别讲解,观看本文之前可以先复习怎样做SEO有利于搜索引擎索引收录(1):4、站点结构网站结构建议采用树型结构,树型结构通常分为首页频道一文章页三个层次。理想的网站结构应该是更扁平一些,从首页到内容页的层

Public @ 2013-09-11 15:55:34

网站原创文章不收录是什么问题怎么解决

问题:网站原创文章不收录是什么问题怎么解决1、首先查看站长平台的‘索引’是否正常,如果每天都有‘索引增加’这个时候,100%原创是被入库的,只是没放出来,过一段时间就放出来了。2、分析LOG日志,查看ULR链接有没有被蜘蛛抓取过,如果没有被抓取过,建议在站长平台进行‘链接提交’。3、网站存在较多严重的SEO问题,从而影响了网站的收录!来源:A5营销

Public @ 2015-06-08 15:55:22

更多您感兴趣的搜索

0.435805s