网站抓取了一些不存在的目录跟页面，本站倒是一个都不抓取是怎么回事？
微信 悬赏
网站抓取了一些不存在的目录跟页面，本站倒是一个都不抓取是怎么回事？要如何做才能让百度来抓取本站页面，一个多页了啥都没抓取，谜一样。。。
以下抓取页面都不存在，另外网站例如新闻页面生成的文章在根目录是没有的，应该是动态的，这是否导致都不抓取了呢？
回答：你确定蜘蛛是真的百度蜘蛛吗？99.99%的概率是假蜘蛛，不是真的！
来源：A5营销
J.K 提问于 3年 之前移动的网络，上百度搜索“SEO”，不见你的博客在首页有排名，请分析一下原因。9 个回答Zac 管理员 回答于 3年 之前前两天回答百度快排的问题时提到过，我个人觉得，我的博客在搜索“SEO”时排名大幅下降，有时候根本找不到，不仅在移动端，PC段也是一样，最大的原因是现在排在前面的大部分是做快排上去的。到目前为止，百度并没有找到处理快排的方法。甚至也可能百度不觉得百度搜索被
问题：阿里云CDN设置80端口还是443端口回答：A，如果网站服务器上没有使用HTTPS，那么设置80端口，如果使用了HTTPS，那么设置443端口！B，如果网站在阿里云CDN上设置的HTTPS，请使用443端口！来源：A5营销
1、网站和页面权重。质量高，资格老的网站被认为权重比较高，这种网站上的页面被爬行的深度也会比较高，所以会更多内页被收录。2、与首页点击距离。一般来说网站上权重最高的是首页，大部分外部链接是指向首页的，蜘蛛访问最频繁的也是首页。离首页点击距离近，页面权重越高，被蜘蛛爬行的机会也越大。3、导入链接。无论是外部链接还是同一个网站的内部链接，要被蜘蛛抓取，就必须有导入链接进入页面，否则蜘蛛根本没有机会知道
百度用于抓取网页的程序叫做Baiduspider - 百度蜘蛛，我们查看网站被百度抓取的情况主要是分析，网站日志里百度蜘蛛Baiduspider的活跃性：抓取频率，返回的HTTP状态码。如何查看网站被百度抓取的情况？查看日志的方式：通过FTP，在网站根目录找到一个日志文件，文件名一般包含log，下载解压里面的记事本，这即是网站的日志，记录了网站被访问和操作的情况。因为各个服务器和主机的情况不同，不
