Categories


Tags


如何将无效的URL重定向到其他页面?

很多时候,我们考虑把无效的URL比如:用户拼错的URL、不存在的URL重定向到别的网页。例如:网站的首页、404页面等。如何将无效的URL重定向到其他页面?在httpd.conf或.htaccess文件中使用ErrorDocument来捕获404 (找不到文件)错误:ErrorDocument 404 /index.htmlDirectoryIndex index.html /path/to/no

Public @ 2011-02-03 16:09:57

sitemap:如何让搜索引擎抓取到所有页面

| sitemap是什么?● 网站地图/链接集合,把网站所有的URL放在一个文件内,方便搜索引擎爬取到。| 如何制作sitemap?● 小型网站采用txt格式的sitemap● 大中型网站采用xml格式的sitemap● 工具:老虎sitemap| 制作sitemap注意事项1. 文件格式为TXT或xml,普通企业官网TXT即可,大型网站可使用xml;2. 按时间倒序排列;3. 每周更新,最好每天

Public @ 2015-07-13 16:09:52

禁止搜索引擎收录的方法

1. 什么是robots.txt文件?搜索引擎使用spider程序自动访问互联网上的网页并获取网页信息。spider在访问一个网站时,会首先会检查该网站的根域下是否有一个叫做 robots.txt的纯文本文件,这个文件用于指定spider在您网站上的抓取范围。您可以在您的网站中创建一个robots.txt,在文件中声明 该网站中不想被搜索引擎收录的部分或者指定搜索引擎只收录特定的部分。请注意,仅当

Public @ 2015-10-28 16:08:55

搜索引擎的Robots协议

robots.txt是一种存放于网站根目录下的文本文件,用于告诉搜索引擎的爬虫(spider),此网站中的哪些内容是不应被搜索引擎的索引,哪些是可以被索引。通常认为,robots.txt文件用来搜索引擎对目标网页的抓取。robots.txt协议并不是一个规范,而只是约定俗成的,通常搜索引擎会识别这个文件,但也有一些特殊情况。对于Google来说,使用robots也未必能阻止Google将网址编入索

Public @ 2018-04-08 16:09:21

更多您感兴趣的搜索

0.071457s