无法在这个位置找到: head2.htm
当前位置: 建站首页 > 新闻 > 公司新闻 >

百度搜索站长服务平台:怎样鉴别Baiduspider 确保网站被一切正常抓取

时间:2021-04-08 13:45来源:未知 作者:jianzhan 点击:
短视頻,自新闻媒体,达人种草1站服务A5站长网(admin5)4月24日信息,有很多网站出現过误封Baiduspider的个人行为,对网站的收录导致危害。乃至有网站反应百度搜索蜘蛛个人行为出现异常

百度搜索站长服务平台:怎样鉴别Baiduspider 确保网站被一切正常抓取


短视頻,自新闻媒体,达人种草1站服务

A5站长网(admin5)4月24日信息,有很多网站出現过误封Baiduspider的个人行为,对网站的收录导致危害。乃至有网站反应百度搜索蜘蛛个人行为出现异常惠顾过度经常。最近百度搜索站长服务平台表明Baiduspider对该站点的抓取并没有出现异常,高并发布实例教程协助站长鉴别Baiduspider,并添加白名单。

上星期百度搜索站长服务平台接到某站长求助,表明误禁封了Baiduspider的IP,了解是不是有方法得到Baiduspider的全部IP,准备放入白名单加以维护,避免再度误封。在此要告知各位站长,Baiduspider的IP池是持续变化的,大家没法出示IP全集。

除此以外,以前也有站长发来提出质疑说Baiduspider惠顾过度经常,已跨越服务器承担工作能力。而百度搜索站长服务平台查证发现,Baiduspider对该站点的抓取并没有出现异常,那只spider极有将会是个李鬼。

那末,站长该怎样根据IP来分辨此spider是否来自百度搜索检索模块的呢?

能够根据DNS反查方法来处理这个难题。依据服务平台不一样认证方式不一样,如linux/windows/os3种服务平台下的认证方式各自以下:

1,在linux服务平台下,您可使用host ip指令反解ip来分辨是不是来自Baiduspider的抓取。Baiduspider的hostname以 *.baidu 或 *.baidu.jp 的文件格式取名,非 *.baidu 或*.baidu.jp 即为假冒。

2,在windows服务平台或IBM OS/2服务平台下,您可使用nslookup ip指令反解ip来 分辨是不是来自Baiduspider的抓取。开启指令解决器 键入nslookup xxx.xxx.xxx.xxx(IP地 址)就可以分析ip, 来分辨是不是来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu 或*.baidu.jp 的文件格式取名,非 *.baidu 或 *.baidu.jp 即为假冒。

3,在mac os服务平台下,您可使用dig 指令反解ip来 分辨是不是来自Baiduspider的抓取。开启指令解决器 键入dig xxx.xxx.xxx.xxx(IP地 址)就可以分析ip, 来分辨是不是来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu 或 *.baidu.jp 的文件格式取名,非 *.baidu 或*.baidu.jp 即为假冒。


(责任编辑:admin)
织梦二维码生成器
顶一下
(0)
0%
踩一下
(0)
0%
------分隔线----------------------------
无法在这个位置找到: ajaxfeedback.htm
栏目列表
推荐内容


扫描二维码分享到微信

在线咨询
联系电话

400-888-8866