账号注册找回密码
  微信登录

奇瑰网社区

还有哪些其他异常?

[复制链接]

0

主题

153

帖子

53

积分

普通会员

Rank: 1

G币
10
信用
0
体力
-26
发表于 2020-7-22 21:04:39 | 显示全部楼层 |阅读模式
1.针对百度refer的异常:网页针对来自百度的refer返回不同于正常内容的行为。
2.针对百度ua的异常:网页对百度UA返回不同于页面原内容的行为。
3.JS跳转异常:网页加载了百度无法识别的JS跳转代码,使得用户通过搜索结果进入页面后发生了跳转的情况。
4.压力过大引起的偶然封禁:百度会根据站点的规模,访问量等信息,自动设定一个合理的抓取压力。但是在异常情况下,如压力控制失常时,服务器会根据自身负荷进行保护性的偶然封禁。这种情况下,请在返回码中返回503(其含义是“Service Unavailable”),这样百度spider会过段时间再来尝试抓取这个链接,如果网站已空闲,则会被成功抓取。源码之家推荐阅读:(百度站长平台抓取异常工具帮助)
1.什么是抓取异常?
2.抓取异常对网站的影响有哪些?
3.什么是服务器连接异常?
4.什么是网络运营商异常?
5.什么是DNS异常?

6.什么是IP封禁?
7.什么是UA封禁?
8.什么是死链?
9.什么是异常跳转?
10.还有哪些其他异常?




上一篇:什么是异常跳转?
下一篇:百度站长平台抓取异常工具帮助
使用高级回帖 (可批量传图、插入视频等)

发表回复

您需要登录后才可以回帖 登录 | 账号注册   微信登录

本版积分规则   Ctrl + Enter 快速发布  

发帖时请遵守我国法律,网站会将有关你发帖内容、时间以及发帖IP地址等记录保留,只要接到合法请求,即会将信息提供给有关政府机构。
Powered by Discuz! X3.4 ( 粤ICP备20013252号-1  
Copyright © 2014-2020 奇瑰网 All Rights Reserved.
快速回复 返回顶部 返回列表