Categories


Tags


网站日志在哪里?如何下载日志?

网站日志是做SEO时网站管理员和搜索引擎对话沟通的途径。通过日志,了解搜索引擎蜘蛛的访问情况。在很多时间,我们需要查看网站日志。以获得了解搜索引擎如何爬取咱们的网站。

如何下载日志

通过FTP访问网站的根目录。可以看到一个包含log的文件夹,这是存放日志的地方。

微信图片_20181108173907.

如何查看日志

下载、解压、打开日志文件,日志文件内容如:

61.135.168.22 - - [11/Jan/2009:04:02:45 +0800] "GET /bbs/thread-7303-1-1.html HTTP/1.1" 200 8450 "-" "Baiduspider+(+http://www.baidu.com/search/spider.htm)" (注:百度,这部分为本文添加)

203.208.60.43 - - [11/Jan/2009:04:02:43 +0800] "GET /sns/space-13563-do-friend-view-me.html HTTP/1.1" 200 5162 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)" (注:Google)

202.160.178.21 - - [11/Jan/2009:04:02:44 +0800] "GET /sns/space.php?uid=323 HTTP/1.0" 200 7535 "-" "Mozilla/5.0 (compatible; Yahoo! Slurp China; http://misc.yahoo.com.cn/help.html)" (注:雅虎)

65.55.220.217 - - [11/Jan/2009:04:02:57 +0800] "GET /ucenter/avatar.php?uid=12373&size=small&type=virtual HTTP/1.1" 301 - "-" "msnbot-media/1.1 (+http://search.msn.com/msnbot.htm)" (注:MSN)

日志文件样板全文下载:

http://edu.seowhy.com/ziliao/wwwlog20090112.log

如何分析日志

蜘蛛名称:百度->baiduspider、Google ->Googlebot、Msn ->msnbot、yahoo ->Slurp、yodao ->YoudaoBot、sogou ->Sogou+get+spider。在日志文件里,搜索以上蜘蛛名称。就可以看到蜘蛛抓取的痕迹。

我们分析的主要点是,HTTP状态码,如以上的200和301。

" 200 5162 " 代表正常抓取,这次抓取了5162个字节。

不同的服务器或虚拟主机设置的日志记录内容不同。

有的如:200 0 33834 237 953 我们通过多看几条记录,观察规律,可以判断第三个数字代表字节数。

有的如:200 0 0或200 0 64 这是没有记录抓取字节数。注意:200 0 0和200 0 64 没代表什么问题。所谓200 0 64代表要被K的言论没有根据,一般的网站都有64代码。

在日志里,发现比较多的HTTP状态码是,200(正常)、304(没变化)、404(错误链接)。

304代表,自从上次抓取后,该内容没有更新。一般情况下,网站的图片经常会返回该值。

404代表,访问的这个链接是错误链接。这个错误链接,一方面来自原本存在后来删除了网页,另一方面可能来自本来就不存在,但其他人外链了这么个死链接。

来源:搜外网


Public @ 2012-04-17 15:32:53

SEO技术人员应该掌握技能有哪些?

当我们看到一家公司招聘SEO技术,从技术两个字就可以推测这是一家网络公司,网络公司规模比较大,手上会有很多的客户,而这些客户可能只是想做一个网站或者推广竞价。那么SEO技术人员主要是负责客户网站的优化必须具备较强的专业技能。SEO技术人员要做哪些工作?掌握哪些技能?1.  根据SEO经理设定的网站架构,对网站内部结构、分类设置、URL规范化及转向进行调整。2.  自动生成的页面

Public @ 2020-08-09 15:29:41

如何找到一个SEO细分市场进行创业?

不少同学学习了SEO后,手上没有具体的实体项目,于是想着在SEO行业提供某一项服务来创业。可以选择以下这几个SEO细分市场来创业。1、专门做某一个城市的网络公司,提供营销型网站建设+SEO优化排名服务。(如果是搜外学员,可以使用搜外6系统来实现)2、专门做SEO软件,比如:发外链的软件、交换友链的软件、查询数据的软件、挖掘关键词的软件、为某个CMS系统或商城提供SEO插件等。3、专门做SEO顾问,

Public @ 2019-01-26 15:29:44

分享两款日志分析工具,光年日志和andiislog

我先简单介绍下这两款网站日志工具,iislog相对比较简单,日志分析很清晰,可以看下图。iislog能清晰的看到蜘蛛来访时间、蜘蛛类型、蜘蛛IP、链接方式、服务器返回的代码、最后是蜘蛛访问网站的地址,一目了然。分享两款iis网站日志分析工具 光年日志分析工具和iislog日志分析工具光年日志分析工具在分析的数据上做得更加细化,概要分析处可以看到各搜索引擎蜘蛛来访次数 、总停留时间(小时) 、总抓取

Public @ 2009-09-07 15:32:54

网站日志分析能反馈什么?

一个seo工作人员,特别是那些大型网站的seo人员来说,能独立分析网站日志是一种必不可少的技能,因为大型的网站栏目结构以及页面非常的繁杂,蜘蛛也是少不了会频繁访问,从蜘蛛给网站留下的一些痕迹上面能够掌控网站不少的信息,这对网站优化运营是一种非常必要的参考,前面小星星的文章里面也对蜘蛛状态码也进行了初步的介绍,这篇文章也对网站日志能读取到的信息作出了总结:分析网站日志能获取到的信息总结:一、可以看出

Public @ 2010-01-05 15:32:50

更多您感兴趣的搜索

0.409501s