
新聞分類
各大搜索引擎蜘蛛爬蟲UA匯總
了解各大搜索引擎蜘蛛爬蟲的UA,對我們進行某些程序編寫十分有用,例如網(wǎng)頁判斷客戶端來源時,UA是常用的標準之一。本文收集了各大搜索引擎的蜘蛛爬蟲UA,以便需要時查閱。
百度
“Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)”
百度圖片
“Baiduspider-image+(+http://www.baidu.com/search/spider.htm)”
百度最新UA如下:
PC:
Mozilla/5.0 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)
移動:
Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143 Safari/601.1 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)
360搜索
Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Trident/5.0);
360網(wǎng)站安全檢測
360spider (http://webscan.#)
“Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)”
Google圖片搜索
“Googlebot-Image/1.0”
Adwords移動網(wǎng)絡
“AdsBot-Google-Mobile (+http://www.google.com/mobile/adsbot.html) Mozilla (iPhone; U; CPU iPhone OS 3 0 like Mac OS X) AppleWebKit (KHTML, like Gecko) Mobile Safari”
微軟 bing,必應
“Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)”
騰訊搜搜
“Sosospider+(+http://help.soso.com/webspider.htm)”
搜搜圖片
“Sosoimagespider+(+http://help.soso.com/soso-image-spider.htm)”
雅虎英文
“Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)”
雅虎中國
“Mozilla/5.0 (compatible; Yahoo! Slurp China; http://misc.yahoo.com.cn/help.html)”
搜狗圖片
“http://pic.sogou.com” “Sogou Pic Spider/3.0(+http://www.sogou.com/docs/help/webmasters.htm#07)”
搜狗
“Sogou web spider/4.0(+http://www.sogou.com/docs/help/webmasters.htm#07)”
網(wǎng)易有道
“Mozilla/5.0 (compatible; YoudaoBot/1.0; http://www.youdao.com/help/webmaster/spider/; )”
瑞典 Speedy Spider
“Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US) Speedy Spider (http://www.entireweb.com/about/search_tech/speedy_spider/)”
俄羅斯 yandex
“Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)”
宜搜 EasouSpider
Mozilla/5.0 (compatible; EasouSpider; +http://www.easou.com/search/spider.html)
華為賽門鐵克蜘蛛
“HuaweiSymantecSpider/1.0+DSE-support@huaweisymantec.com+(compatible; MSIE 7.0; Windows NT 5.1; Trident/4.0; .NET CLR 2.0.50727; .NET CLR 3.0.4506.2152; .NET CLR ; http://www.huaweisymantec.com/cn/IRL/spider)”
華為賽門鐵克科技有限公司網(wǎng)頁信譽分析系統(tǒng)的一個頁面爬取程序,其作用是用于爬取互聯(lián)網(wǎng)網(wǎng)頁并進行信譽分析,從而檢查該網(wǎng)站上的是否含有惡意代碼。
七牛鏡像蜘蛛
qiniu-imgstg-spider-1.0
監(jiān)控寶
“Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; JianKongBao Monitor 1.1)”
DNSPod監(jiān)控
DNSPod-Monitor/2.0
俄羅斯 LinkpadBot
Mozilla/5.0 (compatible; LinkpadBot/1.06; +http://www.linkpad.ru)
英國 MJ12bot
“Mozilla/5.0 (compatible; MJ12bot/v1.4.0; http://www.majestic12.co.uk/bot.php?+)”
[超站]友情鏈接:
四季很好,只要有你,文娛排行榜:https://www.yaopaiming.com/
關注數(shù)據(jù)與安全,洞悉企業(yè)級服務市場:https://www.ijiandao.com/

隨時掌握互聯(lián)網(wǎng)精彩
排名
熱點
搜索指數(shù)
- 1 這一天致青年 我們?nèi)绾钨s續(xù)與傳承 7904076
- 2 “第一天出去旅游的人已老實” 7807854
- 3 男子送老人過馬路 3次敬禮全網(wǎng)刷屏 7713600
- 4 中國假期吸引世界流量 7616347
- 5 張嘉益《人民日報》撰文 7520211
- 6 90后美女副教授走紅 北航回應 7425901
- 7 網(wǎng)警提醒:國慶歡樂游 安全別松懈 7329151
- 8 走失小狗在服務區(qū)苦等主人8小時 7234052
- 9 “課本上的傳奇”珍·古道爾逝世 7143773
- 10 多省發(fā)文補貼社保個人繳費額的25% 7041560