Baiduspider对网页的抓取，是通过网页与网页之间的链接实现的。
网页之间的链接类型，除了站点内部的页面链接之外，还有不同网站之间的互相链接。因此，某些网页即便通过您的网站内部链接无法访问到，但是，如果别人的网站上有指向这些页面的链接，那么这些页面还是会被搜索引擎所收录。
百度Spider的访问权限，和普通用户是一样的。因此，普通用户没有权限访问的内容，Spider也没有权限访问。之所以看上去某些访问权限限制内容被百度收录，原因有两点：
A. 该内容在Spider访问时是没有权限限制的，但抓取之后，内容的权限发生了变化
B. 该内容有权限限制，但是由于网站安全漏洞问题，导致用户可以通过某些特殊路径直接访问。而一旦这样的路径被公布在互联网上，则Spider就会循着这条路径抓出受限内容
如果您不希望这些私密性内容被百度收录，一方面可以通过Robots协议加以限制；另一方面，也可以通过反馈中心反馈给我们进行解决。
百度会收录符合用户搜索体验的网站和网页。为促使百度Spider更快的发现您的站点，您也可以向我们提交一下您的网站的入口网址。提交地址是：http://zhanzhang.baidu.com/sitesubmit。您只需提交首页即可，无需提交详细的内容页面。百度的网页收录机制，只和网页价值有关，与百度推广等商业因素没有任何关联。
您的网站所在的服务器不稳定，sogou spider在检查更新时抓取不到网页而被暂时去除。您的网站不符合用户的搜索体验。
互联网发展至今，分类信息仍然是网民重要的需求之一，伴随着“互联网+”的发展，分类信息的重要性越发突出，虽然互联网的流量被各类型的平台所瓜分，但通过搜索引获取分类信息仍然是网民重要的渠道之一，这就为我们运营分类信息的站长带来巨大的机遇。分类信息想依靠搜索引擎获取大量流量，前提是必须有海量的数据，越多越好，数据多，才有可能被收录，从而获得大量的流量，下面就介绍4种常见的利用搜索引擎推广分类信息方法。一
1.新站点：如果您的网站是新站点，搜索引擎则需要时间来发现并收录您的站点。您可以通过提交站点地图或使用搜索引擎的 Webmaster 工具来加速索引。 2.网站结构问题：如果您的网站结构复杂，搜索引擎可能无法完全抓取并索引您的页面。您需要确保您的网站结构清晰，并使用正确的标记和元素。 3.缺乏质量内容：搜索引擎收录的主要目的是提供高质量的搜索结果。如果您的网站内容质量不佳或与其他网站内容相似，
