单个Sitemap 应该小于 10MB（10,485,759字节），所包含的网址数最多为 50,000 个。
如果您网站包含的网址超过 50,000 个或您的 Sitemap 超过 10MB，则需要创建多个 Sitemap 文件，并且需要使用 Sitemap 索引文件。
Sitemap 索引文件应该小于 10MB（10,485,759字节），且最多可以包含1000个sitemap。
编者按：前两周简要地给大家介绍了搜索抓取系统工作原理，根据该工作原理今天简要介绍一下如何建立网站是符合搜索引擎抓取系统习惯的。1、简单明了的网站结构Spider抓取相当于对web这个有向图进行遍历，那么一个简单明了结构层次分明的网站肯定是它所喜欢的，并尽量保证spider的可读性。（1）树型结构最优的结构即“首页—频道—详情页”；（2）扁平首页到详情页的层次尽量少，既对抓取友好又可以很好的传递权重
网站结构包含：“物理结构”和“逻辑结构优化”两部分。物理结构优化网站物理结构指的是网站目录及所包含文件所存储的真实位置所表现出来的结构，物理结构一般包含两种不同的表现形式：扁平式物理结构和树形物理结构。对于小型网站来说，所有网页都存放在网站根目录下，这种结构就是扁平式物理结构。采用扁平式物理结构的网站。这种扁平式物理结构对搜索引擎而言是最为理想的，因为只要一次访问即可遍历所有页面。但是，如果网站页
是的。您需要在网址中提供协议。例如，http://www.example.com/ 对 Sitemap 来说是有效网址，而 www.example.com 则不是。
ETag是HTTP协议中的一个响应头部字段，用于标识HTTP请求的资源版本。一般由服务器生成，类似于一个唯一标识符，与该资源的内容相关联。ETag的值可以是任何由服务器生成的标识符，例如文件的修改时间戳、哈希值等。 ETag的主要作用有以下几个： 1. 缓存控制：当客户端请求资源时，客户端可以与服务器之间比较ETag的值来判断资源是否过期。如果ETag值相同，则表明资源没有发生变化，客户端可以
