我robots这样写是不是就能避免蜘蛛爬这个“index.htm”这个首页？
User-agent: *
Disallow: /index.htm
11-30.
我的index.htm是现在默认的首页，想屏蔽蜘蛛抓取。让蜘蛛爬另一个文档，主要是规避备案巡查
我的网站和我备案的不一样，服务器那边要求改，我就整了个htm文档来规避下。
写法没有问题。但正常的不建议屏蔽首页地址，，“index.htm”这个后缀地址是需要处理掉的。
当然，如果只是应付备案短暂需求，，就只能这样处理。
后续备案处理后，尽快处理后缀“index.htm”。同时robots修改回去。
来源：搜外网
抖音SEO与百度SEO存在以下区别和相同点： 区别： 1.平台不同：抖音SEO是为抖音这一短视频平台进行优化，而百度SEO则是为百度这一搜索引擎进行优化。 2.搜索方式不同：抖音SEO是基于用户短视频浏览行为的搜索方式，而百度SEO是基于用户的搜索关键词进行搜索的方式。 3.内容形式不同：抖音SEO主要是为视频进行优化，而百度SEO则涉及到各种形式的内容，如文章、图片、视频等。 4.实现
SEO工作人员一般分为三个岗位：SEO主管、SEO编辑、SEO外推。SEO主管：SEO主管要负责整个项目的执行和管控，除了要会建站、站内优化、长尾词挖掘、关键词布局效果监控等一系列的知识以外，还需要拥有团队管理和团队培训的能力。SEO编辑：SEO编辑负责网站内容的编辑和发布，SEO编辑和其他项目（例如公众号编辑、新闻编辑）的编辑有一些不一样，其中最重要的一点就是要懂得SEO知识，例如怎么挖掘长尾关
robots文件往往放置于根目录下，包含一条或更多的记录，这些记录通过空行分开（以CR,CR/NL,or NL作为结束符），每一条记录的格式如下所示："<field>:<optional space><value><optionalspace>"在该文件中可以使用#进行注解，具体使用方法和UNIX中的惯例一样。该文件中的记录通常以
Robots.txt 是一个网站管理员可通过在站点根目录中放置一个名为robots.txt的文件来让搜索引擎（及其爬虫）知道该如何来收录并处理某些目录或页面，并使索引过程更加有效更加规范。 Robots.txt 的作用是向搜索引擎解释网站中哪些目录和文件希望被搜索引擎收录、哪些不希望收录，以避免搜索引擎抓取到网站误差的内容。如果 robots.txt 被恰当地设置，可以有效提高收录质量和网站
