Baiduspider对网页的抓取，是通过网页与网页之间的链接实现的。
网页之间的链接类型，除了站点内部的页面链接之外，还有不同网站之间的互相链接。因此，某些网页即便通过您的网站内部链接无法访问到，但是，如果别人的网站上有指向这些页面的链接，那么这些页面还是会被搜索引擎所收录。
百度Spider的访问权限，和普通用户是一样的。因此，普通用户没有权限访问的内容，Spider也没有权限访问。之所以看上去某些访问权限限制内容被百度收录，原因有两点：
A. 该内容在Spider访问时是没有权限限制的，但抓取之后，内容的权限发生了变化
B. 该内容有权限限制，但是由于网站安全漏洞问题，导致用户可以通过某些特殊路径直接访问。而一旦这样的路径被公布在互联网上，则Spider就会循着这条路径抓出受限内容
如果您不希望这些私密性内容被百度收录，一方面可以通过Robots协议加以限制；另一方面，也可以通过反馈中心反馈给我们进行解决。
收录、索引和site检索结果数之间存在一定的关系。具体而言： 1. 收录：指搜索引擎已经在自己的数据库中记录了某个网站的URL地址。收录数量可以反映出搜索引擎对该网站的关注程度。但是，只有被收录的网页才有可能被搜索引擎检索到。 2. 索引：指搜索引擎对收录的网页进行分析和处理，提取出其中的关键词、标题、描述等信息，并进行排序和组织，最终形成一张搜索索引表。索引数量可以反映出搜索引擎所覆盖的网页
随着pc端与移动端网站的融合，原有索引量数据的展现逻辑已经不足以满足用户的需求，3月中旬特别对移动端的site算法进行了升级，并已正式上线！1、移动端增加site语法卡片，直观展示网站在移动端的索引量；2、移动端site语法与站长平台的索引量工具打平，保证统计方式和统计数量的一致性；3、移动端增加适配索引量，通过pc适配过来的移动url也可以通过site或者搜索url进行展现;来源：百度搜索资源平
第一步，向各大搜索引擎进行提交。百度提交地址：http://www.baidu.com/search/url_submit.html谷歌提交地址：http://www.google.com/addurl/?hl=zh-CN&continue=/addurl第二步，友情链接。这个很重要，如果新站能有几个PR值高的同类网站给你链接，推荐一下的话，很快就能被收录。西部数码为广大网站提供了免费友情
每当我们向别人提出问题，问我们的网站内容为什么不被搜索引擎收录，收到的反馈大都是要我们去更新更多的原创文章。如果我们以数学概念去解释，那么原创内容就是搜索引擎收录的必要条件，而搜索引擎收录考虑的不单单是我们网站是否有充足的原创内容。网站的原创内容为啥不收录？ 百度 SEO 网站 SEO推广 第1张为什么原创内容，不被搜索引擎认可呢?我们有时候身在其中会很困惑，为什么我辛辛苦苦码字码出来的原创内容，
