百度一直致力于将优质内容索引并呈现给搜索用户，因此百度站长平台推出了Sitemap工具，网站可通过该工具将优质资源主动反馈提交给百度站长平台，加强百度对优质资源的收录，优化收录效果。
Sitemap（即站点地图）就是您网站上各网页的列表。创建并提交Sitemap有助于百度发现并了解您网站上的所有网页，包括百度通过传统抓取方式可能找不到的网页。您还可以使用Sitemap提供有关您网站的其他信息，如上次更新日期、Sitemap文件的更新频率等，供百度spider参考。
百度对已提交的数据，不保证一定会抓取及索引所有网址。但是，我们会使用Sitemap中的数据来了解网站的结构等信息，这样可以帮助我们改进抓取策略，并在日后能更好地对网站进行抓取。
此外，Sitemap 与搜索排名没有关系。
robots文件往往放置于根目录下，包含一条或更多的记录，这些记录通过空行分开（以CR,CR/NL, or NL作为结束符），每一条记录的格式如下所示："<field>:<optional space><value><optionalspace>"在该文件中可以使用#进行注解，具体使用方法和UNIX中的惯例一样。该文件中的记录通常
1. 银行和金融机构的网站，因为这些网站可能包含敏感信息，例如客户的个人和财务信息。 2. 医疗保健机构的网站，因为这些网站可能包含个人医疗信息。 3. 艺术、音乐和影片网站，因为这些网站可能包含受版权法保护的内容。 4. 政府网站，特别是警察局和情报机构的网站，因为这些机构的网站可能包含安全敏感信息。 5. 搜索引擎的漏洞报告网站，因为这些网站可能敏感地显示诸如数据库配置、文件位置等敏感
对于网站中希望360搜索抓取的网页url，站长可以将其制作成标准的Sitemap（站点地图）文件。站长提交后Sitemap文件后，360搜索会使用Sitemap中的内容来了解网站结构等信息，有助于今后更全面、更快速地对网站进行抓取。但我们不保证一定会抓取及索引Sitemap中所有网址，也不保证其在搜索结果中的排名。点此提交Sitemap网址
