Categories


Tags


为什么我的网站中的一些私密网页也会被百度收录?

Baiduspider对网页的抓取,是通过网页与网页之间的链接实现的。

网页之间的链接类型,除了站点内部的页面链接之外,还有不同网站之间的互相链接。因此,某些网页即便通过您的网站内部链接无法访问到,但是,如果别人的网站上有指向这些页面的链接,那么这些页面还是会被搜索引擎所收录。

百度Spider的访问权限,和普通用户是一样的。因此,普通用户没有权限访问的内容,Spider也没有权限访问。之所以看上去某些访问权限限制内容被百度收录,原因有两点:

  A. 该内容在Spider访问时是没有权限限制的,但抓取之后,内容的权限发生了变化

  B. 该内容有权限限制,但是由于网站安全漏洞问题,导致用户可以通过某些特殊路径直接访问。而一旦这样的路径被公布在互联网上,则Spider就会循着这条路径抓出受限内容

如果您不希望这些私密性内容被百度收录,一方面可以通过Robots协议加以限制;另一方面,也可以通过反馈中心反馈给我们进行解决。


Public @ 2020-06-19 15:55:52

为什么我的网站中的一些私密网页也会被百度收录?

可能是因为您的私密网页在被收录之前没有被正确地设置为不被搜索引擎收录。您可以通过添加robots.txt文件或使用meta标签来告诉搜索引擎不要收录您的私密网页。另外,您还可以使用基于权限的访问控制方法,如密码保护或IP限制,来确保只有授权用户可以访问您的私密网页。

Public @ 2023-05-27 01:00:08

如何让网站已经收录的无关页面,彻底不收录?

如何让网站已经收录的无关页面,彻底不收录?微信 悬赏之前,关于我们这个页面一直在首页前面nof加了,(site)之后取消首页删除关于我们入口nof也做了然后有效果了,之后排名到第二页了关于我们这个页面又跑上去了,怎么才能彻底取消关于我们页面收录回答:使用robots.txt把当前页面屏蔽掉,过一段时间后,这页面就会不见了!来源:搜外网

Public @ 2014-05-02 15:55:25

内容联盟会导致自己的网站收录下降吗?

由于搜索引擎越来越智能化,内容联盟无疑是将一份内容复制给多个网站,这正是搜索引擎不认可的. 如果您网站的内容在网络上已经被重复千百遍,你的内容可能不会被搜索引擎收录,这也是为什么很多站长反映自己网站不被收录或收录减少的原因之一。

Public @ 2015-12-09 15:27:31

更多您感兴趣的搜索

0.437278s