搜索引擎蜘蛛的标识是什么?如何区分?
当前位置:点晴教程→知识管理交流
→『 技术文档交流 』
:搜索引擎蜘蛛的标识是什么?如何区分? 各家蜘蛛的UA中一般含有spider或者bot字符串,可以用来区分是否蜘蛛。 百度: Mozilla/5.0 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html) Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143 Safari/601.1 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html) 搜狗: Sogou web spider/4.0(+http://www.sogou.com/docs/help/webmasters.htm#07) 360: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/71.0.3578.98 Safari/537.36; 360Spider 谷歌: Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html) 必应: Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm) 该文章在 2024/7/17 10:51:19 编辑过 |
关键字查询
相关文章
正在查询... |