james 提问于 1年 之前
请问Zac大佬，您的爬虫是自己写的吗，可以付费或者免费分享吗？
1 个回答
Zac 管理员 回答于 1年 之前
当然不是啊。生成网站地图是任何CMS的标配，或至少有插件可用。我博客用的WordPress，WordPress本身从5.5版本已经有内置生成sitemap.xml功能，也有很多插件，搜索wordpress sitemap.xml plugin可以看到一大堆。我博客的sitemap.xml是All in One SEO插件生成的。
如果CMS不能生成sitemap.xml就不要用了。
如果是自己开发的CMS，通常是从数据库中直接提取URL，应该不会是靠爬虫抓取生成的。
来源：SEO每天一贴 Zac 昝辉
火山 提问于 3年 之前ZAC老师您好，最近遇到一个问题之前在你博客看到过解决方法！就是网站的内容太长从而对内容进行分页，那么现在搜索引擎会爬行收录了分页这种问题要怎么解决？ 比如：页面是www.xxx.com/news/123.html 搜索引擎会爬行www.xxx.com/news/123_all.html(点击查看全文) 这个链接。1 个回答Zac 管理员 回答于 3年 之前昨天
冬镜seo 提问于 3年 之前优化移动端的网站，现在还有没有必要做友情链接呢？是不是我们做好用户体验和高质量内容输出就行了。2 个回答Zac 管理员 回答于 3年 之前不清楚你说的是哪种情况。有两种情况。一，如果一直有PC端网站，只是现在多了一个独立子域名m.domain.com的移动站，那么不需要为移动端网站单独做外链建设。原来的PC端网站的外链一样会作用于移动端，只要做好了相应的转向和适配，搜
willis 提问于 3年 之前Zac老师，您好，再一次打扰你，最近在优化网站的时候，出现了这样的问题，希望你能给出点意见，网站有五六年的历史，开始做seo只是近一年的事情。现在网站大部分数据，文章都是以前积留下来的，这样的页面很多，最近我发现了这样一种类型页面。我在考虑将他删除，但又怕影响到蜘蛛爬取。1.这样网页基本上是属于文章资讯一类，有将近15000多条，内容质量不高，基本未收录2.页面有内
Van 提问于 3年 之前zac老师您好，希望您在百忙中能抽空帮我解答一下这个疑惑。我进入SEO快2年了，总是为排不上名烦恼，最近发现一些问题，就是有些网站的内容建设不多，页面体验不高，但网站的排名很高，他是做了黑帽吗？3 个回答紫菜头 回答于 3年 之前我也遇到过几个这样的网站，网站是新网站，但是用的老域名，文章页面排版极差，通常存在一些故意堆砌关键词的现象，这样的站经过1-2个月时间，文章页长
