Sitemap（即站点地图）就是您网站上各网页的列表。创建并提交Sitemap有助于百度发现并了解您网站上的所有网页。您还可以使用Sitemap提供有关您网站的其他信息，如上次更新日期、Sitemap文件的更新频率等，供百度Spider参考。
百度对已提交的数据，不保证一定会抓取及索引所有网址。但是，我们会使用Sitemap中的数据来了解网站的结构等信息，这样可以帮助我们改进抓取策略，并在日后能更好地对网站进行抓取。
此外，Sitemap 与搜索排名没有关系。
来源：百度搜索资源平台 百度搜索学堂
1、禁止索引 /wp-admin：用于管理wordpress网站的控制面板，不允许百度收录，避免流量分散。 User-agent: * Disallow: /wp-admin/ 2、禁止索引/wp-includes：WordPress中的核心文件，利用文件禁止百度爬行，提高访问速度。 User-agent: * Disallow: /wp-includes/ 3、禁止索引/wp-c
robots.txt是一种存放于网站根目录下的文本文件，用于告诉搜索引擎的爬虫（spider），此网站中的哪些内容是不应被搜索引擎的索引，哪些是可以被索引。通常认为，robots.txt文件用来搜索引擎对目标网页的抓取。robots.txt协议并不是一个规范，而只是约定俗成的，通常搜索引擎会识别这个文件，但也有一些特殊情况。对于Google来说，使用robots也未必能阻止Google将网址编入索
要提交Sitemap到360搜索站长平台，您可以按照以下流程操作： 1. 登录360搜索站长平台。如果您还没有账号，可以直接使用360账号登录。 2. 在站长平台首页，点击左侧菜单栏的“网站管理”。 3. 在网站管理页面，找到您需要提交Sitemap的网站，点击网站名称进入网站详情页面。 4. 在网站详情页面，点击左侧菜单栏的“站点地图”。 5. 在站点地图页面，点击“新建地图”按钮。
ETag是HTTP协议中的一个响应头部字段，用于标识HTTP请求的资源版本。一般由服务器生成，类似于一个唯一标识符，与该资源的内容相关联。ETag的值可以是任何由服务器生成的标识符，例如文件的修改时间戳、哈希值等。 ETag的主要作用有以下几个： 1. 缓存控制：当客户端请求资源时，客户端可以与服务器之间比较ETag的值来判断资源是否过期。如果ETag值相同，则表明资源没有发生变化，客户端可以
