百度抓取失败返回500错误解决 ***
之前公司网站改版后索引量一直不能提升,后来使用百度站长平台抓取诊断工具进行抓取诊断,结果发现抓取异常。抓取异常返回信息是500错误。但是用户是可以正常访问网站的。这问题一直困扰着我们。
也多次在百度站长平台反馈中心进行反馈,但是得到的回复都是很官方的,没有具体的解决 *** 。再后来在网上查找了很多资料,也在站长社区看了很多帖子,然后觉得很有可能是与公司网站使用的CDN加速有关系。于是与IT商量,与服务商联系。但是服务商否认他们的CDN加速会影响百度蜘蛛的抓取。再后来看到一些关于百度抓取需要CDN加速提供回源或者说是固定IP的分析,再结合我司的情况,觉得很有可能就是这个环节出了问题。
于是让IT提供固定IP,获得IT提供的固定IP后,我再在百度站长平台反馈中心进行反馈,提交了固定IP。接下来百度站长平台抓取诊断工具就能顺利抓取了。
“百度抓取失败返回500错误解决 *** ” 的相关文章