Categories

Tags

建立符合搜索抓取习惯的网站

编者按：前两周简要地给大家介绍了搜索抓取系统工作原理，根据该工作原理今天简要介绍一下如何建立网站是符合搜索引擎抓取系统习惯的。1、简单明了的网站结构Spider抓取相当于对web这个有向图进行遍历，那么一个简单明了结构层次分明的网站肯定是它所喜欢的，并尽量保证spider的可读性。（1）树型结构最优的结构即“首页—频道—详情页”；（2）扁平首页到详情页的层次尽量少，既对抓取友好又可以很好的传递权重

 Public @ 2021-12-30 16:12:04

网站Nofollow标签的应用场景

nofollow标签是HTML的一个属性，用于告诉搜索引擎不要追踪特定的网页链接。减少垃圾对搜索引擎的排名影响。网站SEO优化nofollow标签的应用起到一定的作用。网站Nofollow标签的应用场景：1、nofollow标签通常用于论坛帖子、博客评价，这些地方存在大量的其他网站链接，导致网站上的垃圾链接过多，影响蜘蛛爬取，现在很多博客cms都会带有相关功能自动加上nofollow。2、给广告链

 Public @ 2018-01-06 16:08:50

robots协议

　Robots协议（也称为爬虫协议、机器人协议等）的全称是“网络爬虫扫除规范”（RobotsExclusionProtocol），网站经过Robots协议通知查找引擎哪些页面可以抓取，哪些页面不能抓取　　是查找引擎的一部分来定位和索引互联网上的每个可能答复查找恳求的网页，一般只在评论robots的HTML标签或许robots.txt文件的时分运用。

 Public @ 2010-10-17 15:26:25

更多您感兴趣的搜索

0.511535s