Categories


Tags


我希望我的网站内容被百度索引但不被保存快照,我该怎么做?

Baiduspider遵守互联网meta robots协议。您可以利用网页meta的设置,使百度显示只对该网页建索引,但并不在搜索结果中显示该网页的快照。

和robots的更新一样,因为搜索引擎索引数据库的更新需要时间,所以虽然您已经在网页中通过meta禁止了百度在搜索结果中显示该网页的快照,但百度搜索引擎数据库中如果已经建立了网页索引信息,可能需要二至四周才会在线上生效。


Public @ 2016-03-31 15:56:46

有些搜索结果泄露了我的个人隐私,或对我造成了伤害,希望删除掉这些不良信息

有些搜索结果泄露了我的个人隐私,或对我造成了伤害,希望删除掉这些不良信息答:请您在搜索结果页底部点击”给百度提建议”,选择您认为存在问题的搜索结果条目,并按页面中的引导进行一些必要的信息填写并进行提交,百度的审核人员将对您提交的申诉进行审核,审核通过后将会进行相应的处理。来源:百度搜索资源平台 百度搜索学堂

Public @ 2019-06-23 15:35:23

未建好页面应返回503状态码,防止被删除

近期,百度站长平台发现有一些网站把未建好的页面放到线上,并且这些页面在被百度抓取的时候返回码是404,于是页面被百度抓取后,会被当成死链直接删除。但是这个页面在第二天或者过几天就会建好,并上线到网站内展现出来,但是由于之前已经被百度当做死链删除,所以要再次等这些链接被发现,然后抓取,才能展现,这样的操作最终会导致一些页面在一段时间内不会在百度出现。比如某个大型门户网站爆出大量新闻时效性很强的专题未

Public @ 2015-09-15 15:35:42

轻松两步,正确识别百度蜘蛛(User-Agent)

1. 查看网站日志文件:网站日志文件记录了所有访问者的信息,包括User-Agent,可以通过查看日志文件来确定是否有百度蜘蛛访问。日志文件通常在网站服务器上的特定目录下,以文件扩展名为.log或.txt的形式存储。在日志文件中搜索“Baiduspider”或“Baidu”即可找到百度蜘蛛的记录。 2. 使用在线工具:有许多在线工具可以帮助识别User-Agent,例如User-Agent字符串

Public @ 2023-04-21 13:00:19

BaiDuSpider百度蜘蛛占用流量,robots.txt设置

BaiDuSpider百度蜘蛛是百度搜索引擎的爬虫程序,负责抓取并建立Web页面的索引。百度蜘蛛会消耗服务器的流量和资源,对于一些限制流量的网站,可能会受到影响。为了控制百度蜘蛛的访问,可以使用robots.txt文件进行设置。 robots.txt文件是一种网站协议,用来告诉搜索引擎蜘蛛访问网站的规则。如果在网站根目录下没有设置robots.txt文件,搜索引擎蜘蛛将按照默认规则进行访问。为了

Public @ 2023-04-17 20:00:34

更多您感兴趣的搜索

0.509759s