搜狗严格遵循搜索引擎Robots协议，详细内容，参见http://www.robotstxt.org/
您可以设置一个Robots文件以限制您的网站全部网页或者部分目录下网页不被搜狗收录。
如果您的网站在被搜狗收录之后才设置robots文件禁止抓取，那么新的robots文件通常会在48小时内生效，生效以后的新网页，将不再建入索引。需要注意的是，robots.txt禁止收录以前搜狗已收录的内容，从搜索结果中去除可能需要数月。需要马上删除您可以通过删除快照提交您所需要从搜狗中删除的内容。
网页快照，英文名叫WebCache，网页缓存。搜狗在收录网页时，对网页进行备份，存在自己的服务器缓存里，当用户在搜索引擎中点击“网页快照”链接时，搜狗将搜狗Spider系统当时所抓取并保存的网页内容展现出来，称为“网页快照”。互联网上的网页并不是一成不变的，而是不断增加、删除、改动。因此，搜狗网页数据库中的网页也需要及时更新，既把互联网上网页重新复制一遍。如果你在你的网站上删除一张网页，那么搜狗数
近期，百度站长平台发现有一些网站把未建好的页面放到线上，并且这些页面在被百度抓取的时候返回码是404，于是页面被百度抓取后，会被当成死链直接删除。但是这个页面在第二天或者过几天就会建好，并上线到网站内展现出来，但是由于之前已经被百度当做死链删除，所以要再次等这些链接被发现，然后抓取，才能展现，这样的操作最终会导致一些页面在一段时间内不会在百度出现。比如某个大型门户网站爆出大量新闻时效性很强的专题未
新站如何第一次提交会收录起来？我的网站已经建设好了，各个方面都完善差不多了，现在需要提交让搜索引擎收录，怎么第一次提交自己的站，提交多久开始收录起来？新站优化有什么技巧吗？谢谢哥哥姐姐解答！快的话上线提交之后就可以收录首页，慢的话7天~3个月，甚至时间更长。内页收录得话，起码要2~3月，甚至时间更长，现在新站收录内页很难。1、多做一些优质外链，和友链。2、百度站长验证网站，然后提交网站地图，主动推
站长常常会告知我们搜索结果不显示他们的网站，但其实这些网站仍然收录在搜索结果当中。要判断搜狗是否已经收录您的网站，可以通过执行site语法查看，直接在搜狗搜索框中输入site:您的域名，如site:www.sogou.com，如果可以查询到结果，那您的网站就已经被搜狗收录。 site语法得到的搜索结果数，只是一个估算的数值，仅供参考。如果您的网站曾经被收录，但现在site语句仍然无法查找到，则可能
