james 提问于 1年 之前
请问Zac大佬，您的爬虫是自己写的吗，可以付费或者免费分享吗？
1 个回答
Zac 管理员 回答于 1年 之前
当然不是啊。生成网站地图是任何CMS的标配，或至少有插件可用。我博客用的WordPress，WordPress本身从5.5版本已经有内置生成sitemap.xml功能，也有很多插件，搜索wordpress sitemap.xml plugin可以看到一大堆。我博客的sitemap.xml是All in One SEO插件生成的。
如果CMS不能生成sitemap.xml就不要用了。
如果是自己开发的CMS，通常是从数据库中直接提取URL，应该不会是靠爬虫抓取生成的。
来源：SEO每天一贴 Zac 昝辉
要解决百度蜘蛛无法抓取的问题，可以考虑以下几个方面： 1. 确保网站存在合适的 robots.txt 文件：robots.txt 是一个协议，用于向搜索引擎指明哪些页面可以被抓取。检查一下该文件是否正确设置，且不会阻止百度蜘蛛的抓取。 2. 检查网站的反爬虫策略：有时候网站会使用反爬虫机制来防止被搜索引擎抓取，如验证码、IP 封禁等。确保网站没有设置过于严格的反爬虫策略，或者将百度蜘蛛的抓取排
PC端和移动端之间的差异主要来自于页面内容和结构，可能导致移动端页面被搜索引擎排除在搜索结果之外。例如，移动设备上的页面可能会使用不同的HTML和CSS代码，从而影响页面的可访问性和可读性。此外，页面加载速度和网站安全性等因素也可能影响搜索引擎的决策。 要解决此问题，可以采取以下步骤： 1.正确设置移动设备的优化。创建移动友好的网站，并确保它可以在各种设备上进行访问。使用响应式设计或动态网站，
何骝 提问于 3年 之前你好，请问下如果我在一篇文章里，对其中的关键词想加上超链接，但是加不了，只能用这种形式：关键词（www.ABC.com）类似这种形式，不知道搜索引擎是否识别，能算一个外链吗？谢谢，打扰了随风 回复于 3年 之前这算是纯文本链接，算是外链，但是外链的作用微乎其微。2 个回答Zac 管理员 回答于 3年 之前这只是普通文字，不是链接。有可能对页面抓取有些作用，搜索引擎能从文字中
yaoting38 提问于 3年 之前ZAC大大您好，先说一下网站的情况，今年11月份自己研究的建站和网站优化，属于消防类企业站吧，所有优化都是在网络学习借鉴后实施的，但是目前不知道什么情况，在地方类消防网都不能靠前排名，文章也一直在更新，还是被大多数牛皮癣的B2B广告给压下去。不知道是否需要专业SEO团队加持？1 个回答Zac 管理员 回答于 3年 之前个人网站的话，我觉得没必要找专业SEO团队
