开发者社区> 问答> 正文

百度抓取诊断异常:服务器错误

网站之前使用虚拟主机,能够正常访问并被百度抓取。
网站从虚拟主机搬到阿里云服务器,linux系统,安装oneinstack,并开启了SSL


网站能够正常访问,但是百度索引下降。


通过百度站长的抓取诊断工具检查,发现抓取异常:服务器错误
具体信息如下:

抓取UA:    Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)
抓取时间:    2017-08-09 11:26:39
网站IP:    106.***.***.66 报错
下载时长:    0.697秒
抓取异常信息:    服务器错误  查看帮助
返回HTTP头:
HTTP/1.1 500 Internal Server Error
Date: Wed, 09 Aug 2017 03:26:40 GMT
Content-Type: text/html; charset=UTF-8
Transfer-Encoding: chunked
Connection: close
Server: nginx
Vary: Cookie


服务器安全组打开了21、22、80、443、20000/30000 端口


求教,到底哪里出现了问题,该如何解决,谢谢!

展开
收起
繁华瞬间 2017-08-09 11:29:45 33322 0
1 条回答
写回答
取消 提交回答
  • 也许和百度蜘蛛的抓取规则有关
    2017-08-10 06:39:53
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
AIOps-百度的思考与实践 立即下载
百度外卖从IDC到云端服务迁移历程 立即下载
百度研发工具集的应用实践——打造持续交付路上的“三堵墙” 立即下载