问题情况:
百度搜索资源平台认证网站后使用robots检测工具检测网站robots出现:您的服务器配置有误提示。
百度资源平台报错信息:
您的服务器配置有误
百度暂时无法连接您的服务器,请检查服务器的设置,确保您网站的服务器能被正常访问。错误码: 500
问题截图:
解决方法:
首页检查自身站点 robots.txt文件是否可以访问。
如果可以访问,则检查其他问题,不可以访问,则robots文件没创建好或者服务器其他问题,请排查解决后在使用工具检测。
确认站点 robots.txt文件可以被访问,使用百度搜索资源平台的抓取诊断工具对站点进行检测,确认蜘蛛是否可以正常的访问网站。
抓取诊断工具位置:数据统计》抓取诊断
确认蜘蛛可以访问,则无论理会。一般过段时间(可能是2-7天)就可以了。长时间不行你可以在资源平台进行反馈。
如果蜘蛛无法访问,则检查网站服务器是否封禁了蜘蛛等可能影响蜘蛛访问的原因。
原因分析:
出现这种问题一般都是DNS服务器没更新(也有可能是百度其他问题)
下面我们来分析下为什么会出现这种情况,在分析之前我们先来看一下我们访问网页的一个过程:
- 用户在浏览器输入协议://域名
- 用户浏览器通过系统向DNS服务器查询对应IP地址
- 用户浏览器向查询到的IP地址的web服务器发起HTTP请求
- 服务器分析用户请求,数据库中提取数据,处理后返回一个HTTP响应
- 浏览器受到响应后,提前约状态、协议编码、正文有效信息、翻译成直观图形界面显示
从上面我们可以得,我们访问一个网站,并不是直接和一个网站服务器进行通信,而是会先DNS服务器查询域名对应的服务器IP地址,我们才可以和这个网站服务器进行通信,请求资源。
DNS为了加快解析速度通常会对域名和IP地址的关系进行缓存,出现这种情况,一般就是你域名是老域名或者是换了服务器,蜘蛛获取到的IP还是域名之前的服务器IP,那么这个时候,自然就无法访问你的网站了。
之前我们说过的:百度资源平台抓取诊断错误:DNS无法解析IP-解决,也是同类型的情况。
如果抓取诊断错误,网站又可以正常访问且确认没对百度蜘蛛进行封禁,那么也很大可能是这个DNS服务器的原因。你可以提交robots、sitemap等文件又或者是重新认证网站的方式。然后等待百度蜘蛛更新你的服务器IP(一般两天左右就好了,有时候不知道什么原因可能要2-5天(个人经历))。如果长时间不行,你也可以选择在资源平台进行反馈。
那么以上就是关于百度搜索资源平台robots检测更新提示:您的服务器配置有误这个问题我们林风网络给出的解决方法和原因分析了。如果您有其他疑问或者SEO诊断、外包、网站建设等需求,欢迎咨询我们。