Google浏览器Chrome模拟百度蜘蛛访问的方法

By 李战

2021-07-05 17:18:49

浏览量2163

已赞0

Google浏览器Chrome模拟百度蜘蛛访问的方法

某些网站可能针对搜索引擎挂马(百度/360/搜狗等),Chrome浏览器可以安装User-Agent Switcher for Chrome模拟百度蜘蛛来访问网页,如果是针对搜索引擎挂马的就会显示。

下载蜘蛛模拟软件,模拟蜘蛛访问查看非法信息。

准备工作

已经安装Google Chrome浏览器

安装扩展

访问 User-AgentSwitcher_1_0_43.crx 并下载这个扩展

User-AgentSwitcher_1_0_43.crx

按照下图打开Chrome浏览器 - 扩展程序



设置百度蜘蛛

安装完成在扩展程序页面可以看到User-Agent Switcher for Chrome点选项

按照如下截图添加百度蜘蛛(蓝色的文字部分)

New User-agent name:baidu

New User-Agent String:Mozilla/5.0 (compatible;Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html;)

Group:spider

Append?:Repalce

Indicator Flag:1


测试

安装扩展后Chrome浏览器右上角多出一个小眼睛,点击小眼睛 - spider - baidu,这样就可以模拟百度蜘蛛访问了。

发表评论
请先 注册/登录 后参与评论

已有2 发布

默认   热门   正序   倒序
  • 2F
    李战2021-07-06 11:49:54   
    在百度站长平台,使用百度抓取诊断的时候,显示的百度蜘蛛信息:

    Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)
    Image

    提交网址:	https://www.e7u.net/read-200-1.html
    抓取网址:	https://www.e7u.net/read-200-1.html
    抓取UA:	Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)
    抓取时间:	2021-07-06 11:46:10
    网站IP:	118.***.***.0 报错
    下载时长:	0.24秒
    

    0
  • 3F
    李战2021-07-08 12:24:11   
    搜狗蜘蛛信息:

    Sogou web spider/4.0(+http://www.sogou.com/docs/help/webmasters.htm#07)

    0
查看更多评论

TOP排行