Baiduspider对网页的抓取，是通过网页与网页之间的链接实现的。
网页之间的链接类型，除了站点内部的页面链接之外，还有不同网站之间的互相链接。因此，某些网页即便通过您的网站内部链接无法访问到，但是，如果别人的网站上有指向这些页面的链接，那么这些页面还是会被搜索引擎所收录。
百度Spider的访问权限，和普通用户是一样的。因此，普通用户没有权限访问的内容，Spider也没有权限访问。之所以看上去某些访问权限限制内容被百度收录，原因有两点：
A. 该内容在Spider访问时是没有权限限制的，但抓取之后，内容的权限发生了变化
B. 该内容有权限限制，但是由于网站安全漏洞问题，导致用户可以通过某些特殊路径直接访问。而一旦这样的路径被公布在互联网上，则Spider就会循着这条路径抓出受限内容
如果您不希望这些私密性内容被百度收录，一方面可以通过Robots协议加以限制；另一方面，也可以通过反馈中心反馈给我们进行解决。
1. 搜索关键词过于广泛或泛化。如果您使用的关键词过于广泛或泛化，搜索引擎可能会返回与您期望的结果不符的摘要。 2. 搜索引擎的算法未能正确解释您的意图。搜索引擎算法可能无法理解您的搜索意图，从而返回与您期望的结果不符的摘要。 3. 搜索引擎的数据库中没有您想要的相关信息。如果您搜索的内容非常特定或较新，搜索引擎可能无法在其数据库中找到相关信息。 4. 搜索引擎的广告结果与有机结果混淆。某些
以下是一些可能会被百度认为是没有价值的网页： 1. 原创度低：内容复制粘贴自其他网站，没有独特性和原创性。 2. 内容质量低：网页内容质量差、无意义、过时或不准确。 3. 广告密度高：网页广告密度过高，影响用户体验，让用户难以找到有价值的内容。 4. 页面速度慢：网页打开速度慢，需要很长时间加载，用户体验差。 5. 多次违反百度规则：在过去多次违反百度规则，被百度扣除权重或直接罚站。
如果您的站被收录了两次并被封掉了两次，您需要先确定被封的原因。通常情况下，站被封的原因有以下几种： 1. 站点内容违反了搜索引擎的规定； 2. 站点存在大量的垃圾链接； 3. 站点存在大量的黑帽SEO技术。 如果您的站点符合以上任何一种情况，您需要先解决这些问题，然后联系搜索引擎进行申诉。如果您的站点符合搜索引擎的规定且没有任何违规行为，您可以向搜索引擎提出申诉并解释您的情况。 此外，您可以
我的站怎么就不被收录呀？这个问题，被大家问过无数遍。我也回答了不下百遍。下面是解决方案:1、查下你的网络日志，在日志里搜索这几个：“baidu”“google”“yahoo” ；2、从最近的日志里开始找，如果没有，再往前找一个；3、日志中有这几个结果：1）如果日志里，从来没有出现过这几位老大的机器人（Robot），那说明你没有提交成功或者是因为你发了太多spam（垃圾）链接被搜索引擎直接放入垃圾桶
