什么是robots文件
Robots是站点与spider沟通的重要渠道，站点通过robots文件声明本网站中不想被搜索引擎收录的部分或者指定搜索引擎只收录特定的部分。
搜索引擎使用spider程序自动访问互联网上的网页并获取网页信息。spider在访问一个网站时，会首先会检查该网站的根域下是否有一个叫做 robots.txt的纯文本文件，这个文件用于指定spider在您网站上的抓取范围。您可以在您的网站中创建一个robots.txt，在文件中声明 该网站中不想被搜索引擎收录的部分或者指定搜索引擎只收录特定的部分。
请注意，仅当您的网站包含不希望被搜索引擎收录的内容时，才需要使用robots.txt文件。如果您希望搜索引擎收录网站上所有内容，请勿建立robots.txt文件。
来源：百度搜索资源平台 百度搜索学堂
1. 服务器端没有正确配置HTTPS证书。 2. HTTPS证书过期。 3. HTTPS证书不匹配。 4. 服务器端防火墙配置错误。 5. 客户端浏览器本身存在安全漏洞。 6. 黑客攻击或中间人攻击。 7. 网络连接不稳定或者网络质量不好导致无法传输HTTPS证书。 8. HTTPS证书被恶意劫持。
尊敬的站长用户： 感谢您一直以来对百度站长平台的支持与使用！为了提供更好的用户体验和服务，百度站长平台即将进行一次全新的改版。 改版后的百度站长平台将更加简洁、直观，同时提供更多实用的功能和工具，帮助您更好地管理和优化网站。界面设计将更加流畅，操作更加方便，让您能够更轻松地进行数据分析、站点提交和排名监控等工作。 在改版过程中，我们将尽量减少对用户的影响，并保证平台的稳定运行。有关具体的改版
我今天来给大家详细讲解下，先了解几个概念1、robots只是禁止抓取，不是禁止收录2、另外还有nofollow的作用不是不抓取这个链接，是不从这个链接传递权重了解这2个概念后，我们再来讨论怎么处理这类收录问题：robots写正确的同时，不要在任何一家收录的网站发外链，友链，也不要主动提交百度，这样才可以保证不被搜索引擎收录，为什么呢？大家百度查一下淘宝，如图：按照道理淘宝写了robots怎么还是收
Robots.txt 是一个网站管理员可通过在站点根目录中放置一个名为robots.txt的文件来让搜索引擎（及其爬虫）知道该如何来收录并处理某些目录或页面，并使索引过程更加有效更加规范。 Robots.txt 的作用是向搜索引擎解释网站中哪些目录和文件希望被搜索引擎收录、哪些不希望收录，以避免搜索引擎抓取到网站误差的内容。如果 robots.txt 被恰当地设置，可以有效提高收录质量和网站
