巅峰霸主 > 在线帮助文档 > 搜索引擎蜘蛛 > Baiduspider-render渲染蜘蛛

理解Baiduspider-render渲染蜘蛛

时间:2020-12-04 14:06:16  来源:巅峰霸主网  作者:烈火大地 点击:
摘要:在网站的日志里面发现有很多Baiduspider-render的浏览记录,想要把这个ua禁用,但是又不知道具体是什么作用,下面是详细说明……

这个Baiduspider-render还真的不能禁用,因为他是百度渲染蜘蛛,主要作用是抓取css和JavaScript及图片信息,对网站的用户体验进行识别。来自百度官方的介绍:

为了给搜索用户更好的体验、对站点实现更好地索引和呈现,百度搜索需要访问网站的CSS、Javascript和图片信息,以便更精准地理解页面内容,实现搜索结果最优排名,百度搜索会全面启用最新UA来访问站点的上述资源。从3月24日(2017)开始,百度搜索抽取了部分优质站点进行抓取内测,可能会对站点服务器造成一定压力影响,请尽量不要对UA进行封禁,以免造成不可逆转的损失。

最新UA如下:

PC:

Mozilla/5.0 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)

移动:

Mozilla/5.0
 (iPhone; CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, 
like Gecko) Version/9.0 Mobile/13B143 Safari/601.1 (compatible; 
Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)

原文链接:https://ziyuan.baidu.com/wiki/990

(责任编辑:陆柏熺)
评价:
用户名: 验证码: 看不清?点击更换


关注站长自媒体 获取更多优质内容

  • 百家号
    百家号
  • 头条号
    头条号
  • 企鹅号
    企鹅号

2019-2021 ©巅峰霸主网 京ICP备12023415号-2
返回
顶部