james 提问于 1年 之前
请问Zac大佬，您的爬虫是自己写的吗，可以付费或者免费分享吗？
1 个回答
Zac 管理员 回答于 1年 之前
当然不是啊。生成网站地图是任何CMS的标配，或至少有插件可用。我博客用的WordPress，WordPress本身从5.5版本已经有内置生成sitemap.xml功能，也有很多插件，搜索wordpress sitemap.xml plugin可以看到一大堆。我博客的sitemap.xml是All in One SEO插件生成的。
如果CMS不能生成sitemap.xml就不要用了。
如果是自己开发的CMS，通常是从数据库中直接提取URL，应该不会是靠爬虫抓取生成的。
来源：SEO每天一贴 Zac 昝辉
因为某种历史原因，我们公司的网站不能做独立的移动端，只能用PC站做自适应。现在我对移动端做了很多修改，主要是隐藏了很多不适合在移动端显示的内容，大概占全部内容的3分1，包括友链和很多内链。这样有可能会被百度惩罚吗？回答：自适应设计的页面在移动端适当隐藏一些不适合手机显示的内容是正常的，不会被百度惩罚。但不要隐藏主体内容和重要链接，不然有cloaking之嫌。隐藏内容的三分之一好像挺多的，那些隐藏的
章洲瑜 提问于 3年 之前1.新站上线99niao. cn，刚开始百度有排名，一个星期后，全部掉完。之前搜索任何关键词都搜索不到站点。2.怀疑是网站模板有问题，更换模板后，排名还是老样子。3.域名domian出现大量的灰色相关词，麻烦大神帮我看一下，是不是百度对域名进行拉黑导致的。4.360和搜狗排名非常好，个人经验判断不属于网站内容质量和结构有问题。不算老手的老手 回复于 3年 之前你好借楼想问
校园 提问于 3年 之前zac老师你好，我想问下，关于百度搜索页展示的图片有没有规则，或者怎么样可以禁止百度随机调取站内的图片进行展示。站点还没有logo权限，百度现在随机调取站内的图片来展示，有时候会调用全黑的图片来展示。JK 回复于 3年 之前解决办法是：使用robots.txt禁止抓取该图片。另外，你可以在网页 将你想展示的图片的代码放上（比如： ），尺寸要求为：121X75 像素，过一段时
