robots.txt是一个网站的根目录中的文件，用于告知搜索引擎哪些页面和文件可以被搜索引擎的爬虫访问，哪些不可以。该文件是遵循 robots协议的网站必不可少的一个文件，用于控制搜索引擎的爬虫访问网站的行为。通过robots.txt文件，网站管理员可以禁止搜索引擎爬虫访问一些无用或敏感的网站内容，或是避免搜素引擎爬虫访问较为频繁的API接口等。
： 1、除具有巨额财富、显著影响力、重大贡献的历史人物、集团及自然的LOGO外，设计上力求简洁、大气、有秩序； 2、强调企业文化及品牌服务内涵，积极正能量； 3、排斥侵权和低俗内容，确保微信站点安全性、安全性和分享性； 4、LOGO体现企业文化及形象（如：服务宗旨、产品概念、价值观、企业使命、核心文化等）； 5、LOGO中包含著名品牌、具有明显商业宣传意图的图文等，将不予受理； 6、L
作者：百度站长平台 发布时间：2013年6月28日各位网站管理员，很高兴的通知大家，百度站长平台消息提醒工具在6月27日全新升级，能够及时告知网站的五大异常问题及原因，帮助站长高效快速的解决网站异常问题，实现“低质泛滥有提醒，算法更新不用愁”。如果你也曾为网站流量暴跌、收录爆降而烦恼？也一直在寻找能及时发现并处理网站异常的方法，就赶快加入百度站长平台，使用消息提醒工具。消息
我希望我的网站内容被百度索引但不被保存快照，我该怎么做？Baiduspider遵守互联网meta robots协议。您可以利用网页meta的设置，使百度显示只对该网页建索引，但并不在搜索结果中显示该网页的快照。和robots的更新一样，因为搜索引擎索引数据库的更新需要时间，所以虽然您已经在网页中通过meta禁止了百度在搜索结果中显示该网页的快照，但百度搜索引擎数据库中如果已经建立了网页索引信息，可
obots.txt 文件必须放在网站的根目录。放在子目录的 Robots.txt 文件搜索引擎不能爬取到，所以不会起任何作用。如：https://www.seowhy.com/robots.txt 是有效的。https://www.seowhy.com/a/robots.txt 是无效的。以下3种情况需要注意：1、如果手机网站采用的是m.的二级域名，要给手机网
