Categories


Tags


网站改版中关于robots.txt文件问题

zbwsmile 提问于 3年 之前

zac老师好,非常感谢你无私的正确的分享对我的SEO工作方面的帮助!

我的站点状况:我有一个老的PC站点(例:www.oldPC.cn,当时还没有对应的WAP站点)进行了网站改版,当时的做法是全站301到新的域名(例:www.newPC.com)下。目前建立一个独立的移动m站(例:m.newPC.com)。通过百度的site语句发现,如果site:m.newPC.com会直接展示原来的PC域名(www.oldPC.cn)。前几天刚把老域名在百度站长里更新了网站改版,正在观察。

我的问题是:oldPC站点的www.oldPC.cn/robots.txt 访问时也被301跳转到www.newPC.com/robots.txt 。我目前觉得这个不正常,网络上百度谷歌都没有相关说明,想得到您的分析与建议,另外如果zac老师或者其他同行看到我的网站描述有什么建议也欢迎交流,响应式移动站点可能最近开发这里做不了。谢谢!

1 个回答

Zac 管理员 回答于 3年 之前

网站换域名时,旧域名robots文件不要自动转向到新域名下的robots文件,并且旧域名robots文件最好删除所有抓取限制,这样搜索引擎在旧域名上的抓取都会被识别到转向至新域名。

zbwsmile 回复于 3年 之前

“旧域名robots文件最好删除所有抓取限制”,是什么意思?我目前操作是全部Disallow了

Zac 管理员 回复于 3年 之前

意思就是全部要allow,全部允许抓取,和你做的正相反。你disallow的话,搜索引擎不能抓,那怎么看到转向到新URL了呢?

Ella 回复于 2年 之前

zac老师,如果不换域名,只是换协议,从HTTP到HTTPS呢?robots文件需要跳转吗?

来源:SEO每天一贴 Zac 昝辉


Public @ 2013-10-12 15:53:42

【直播干货】研发工程师直播专场QA集锦

一、网站抓取建设指南Q1:百度搜索会对新网站给予更高的抓取频次吗?A1:百度搜索会先识别网站内容的优质度,对内容优质的新站点在抓取频次上会有一定的倾斜,帮助内容得到更好的展现。Q2:如何让百度搜索知道我的网站是一个新站点呢?A2:主要有两种方式:1、通过百度搜索资源平台——资源提交工具来提交内容;2、在工信部进行网站ICP备案。Q3:百度搜索会调整对网站的抓取频次吗?A3:会的。百度搜索会基于网站

Public @ 2014-03-12 15:27:22

以SEO的视角看带index和不带index的首页有什么区别?

梁小菜 提问于 1年 之前因为现在网站是不带index的301到带index的首页,但是在有些内链建设以及友情链接交换中,也用到了不带index的首页,这样是做了无用功还是没有影响?1 个回答Zac 管理员 回答于 1年 之前这是典型的网址规范化问题。两个版本都存在和收录有可能影响页面权重、抓取等。你要选一个规范化的网址,自己统一使用规范化网址,且非规范化版本URL要做301转向到规范化URL。具

Public @ 2014-12-02 15:54:13

百度快照是空白的会影响SEO吗?

洞洞拐 提问于 3年 之前百度快照是空白的,首页没问题,列表页貌似所有类别都是空白的。快照投诉也投诉过,但是没有反应,依然是空白的,我这里说的空白是那种全白,什么都没有。。。例url:https://www.hdb.com/beijing/98-0-2-0-0-1/ ;https://www.hdb.com/beijing/101-0-2-0-0-1/  ;基本上类别页面都是一样,不清楚

Public @ 2012-08-16 15:53:25

更多您感兴趣的搜索

0.443381s