Categories


Tags


网站改版中关于robots.txt文件问题

zbwsmile 提问于 3年 之前

zac老师好,非常感谢你无私的正确的分享对我的SEO工作方面的帮助!

我的站点状况:我有一个老的PC站点(例:www.oldPC.cn,当时还没有对应的WAP站点)进行了网站改版,当时的做法是全站301到新的域名(例:www.newPC.com)下。目前建立一个独立的移动m站(例:m.newPC.com)。通过百度的site语句发现,如果site:m.newPC.com会直接展示原来的PC域名(www.oldPC.cn)。前几天刚把老域名在百度站长里更新了网站改版,正在观察。

我的问题是:oldPC站点的www.oldPC.cn/robots.txt 访问时也被301跳转到www.newPC.com/robots.txt 。我目前觉得这个不正常,网络上百度谷歌都没有相关说明,想得到您的分析与建议,另外如果zac老师或者其他同行看到我的网站描述有什么建议也欢迎交流,响应式移动站点可能最近开发这里做不了。谢谢!

1 个回答

Zac 管理员 回答于 3年 之前

网站换域名时,旧域名robots文件不要自动转向到新域名下的robots文件,并且旧域名robots文件最好删除所有抓取限制,这样搜索引擎在旧域名上的抓取都会被识别到转向至新域名。

zbwsmile 回复于 3年 之前

“旧域名robots文件最好删除所有抓取限制”,是什么意思?我目前操作是全部Disallow了

Zac 管理员 回复于 3年 之前

意思就是全部要allow,全部允许抓取,和你做的正相反。你disallow的话,搜索引擎不能抓,那怎么看到转向到新URL了呢?

Ella 回复于 2年 之前

zac老师,如果不换域名,只是换协议,从HTTP到HTTPS呢?robots文件需要跳转吗?

来源:SEO每天一贴 Zac 昝辉


Public @ 2013-10-12 15:53:42

搜索引擎多久刷新一次旧的页面?

搜索引擎第天都会去您的博客上收录您新发布的页面,但是,搜索引擎是否会每天都去查一下您的老页面有没有更新? 因为这个工作量相当巨大。假如您已经写了十年博客,您大概已经写了3650篇博文,搜索引擎如果常常刷新,这个工作量之巨,恐怕难以承受,而且随时互联网上的内容越来越多,这个工作量将无限倍增。你是否有研究过搜索引擎多长时间检查一下老页面的更新? 是否年代越久远,频率就越低? 假如确实如此的话,您的博客

Public @ 2022-07-25 16:04:43

什么样的锚文本才有效果?

有效的锚文本应该具备以下特点: 1. 直接关联:锚文本直接与所指向的链接相关,与链接内容相符合。 2. 体现内容:锚文本应体现链接指向的内容,且不应与链接所在页面的其他信息冲突。 3. 精简简洁:锚文本应该简单明了,清晰易懂,能够让用户立刻明确点击链接后所要访问的内容。 4. 自然流畅:锚文本应该自然流畅,不应该被强行插入,以免影响用户阅读体验。 5. 多样性:锚文本应该有多种不同的变化

Public @ 2023-04-26 21:00:15

如何解决百度spider无法抓取的问题?

1. 在网站的robots.txt文件中合理设置百度抓取; 2. 尽量避免使用动态加载内容,这类文件很难被抓取; 3. 尽量保证网站中URL的友好性和统一性,如果使用参数需正确使用问号和连字符,减少复杂导致无法收录的情况; 4. 尽量避免使用隐藏式代码,如JS和CSS文件; 5. 将网站的XML Sitemap反馈给百度,提高抓取效率; 6. 避免使用iframe,把需要显示的内容改写成HTM

Public @ 2023-02-26 13:54:20

更多您感兴趣的搜索

0.495759s