站点地图是一个网站所有链接的容器。很多网站的连接层次比较深，爬虫很难抓取到，站点地图可以方便爬虫抓取网站页面，通过抓取网站页面，清晰了解网站的架构，网站地图一般存放在根目录下并命名sitemap，为爬虫指路，增加网站重要内容页面的收录。站点地图就是根据网站的结构、框架、内容，生成的导航网页文件。站点地图对于提高用户体验有好处，它们为网站访问者指明方向，并帮助迷失的访问者找到他们想看的页面。
站点地图，是一种指明信息资源方位与联系，并且具有导航功能的可视化工具。其关键在于信息的获取、信息的检索、信息的表示和信息的关联四个方面。简而言之，就是以类似地图的形式，将主页的信息按照类日罗列起来，并提供相应的链接，它可以为用户提供主页的整体信息，是用户准确找到自己所需信息的快速入口 。
Robots.txt 是一个网站管理员可通过在站点根目录中放置一个名为robots.txt的文件来让搜索引擎（及其爬虫）知道该如何来收录并处理某些目录或页面，并使索引过程更加有效更加规范。 Robots.txt 的作用是向搜索引擎解释网站中哪些目录和文件希望被搜索引擎收录、哪些不希望收录，以避免搜索引擎抓取到网站误差的内容。如果 robots.txt 被恰当地设置，可以有效提高收录质量和网站
360搜索支持Robots协议的主要命令，以下为具体说明：1. user-agent360搜索各产品的爬虫user-agent为：- 网页搜索 360Spider- 图片搜索 360Spider-Image- 视频搜索 360Spider-Video2. Allow站长可通过Allow命令指定建议收录的文件、目录 。3. Disallow站长可通过Disallow命令指定不建议收录的文件、目录。
移动Sitemap协议是一种用于向搜索引擎提交移动网站页面信息的协议。它类似于普通的Sitemap协议，但是专门针对移动网站页面优化而设计。 可以通过以下步骤来提交移动Sitemap协议： 1、创建移动Sitemap文件：根据搜索引擎要求，创建包含移动网站页面信息的Sitemap文件。 2、将Sitemap文件上传到网站服务器中。 3、将Sitemap文件的URL提交给搜索引擎：访问搜索引
不会。网址在 Sitemap 中的位置并不会影响百度对它的识别或使用方式。
