2021-08-08 分類: 網站建設
對于SEO優化工作者們清楚掌握主流搜索引擎的爬蟲名稱十分的關鍵,因為當分析網站日志的時候來分析爬取情況,以及如果為了保護站點內容的時候的需要屏蔽搜索引擎爬取,這兩者都要基于清楚的了解搜索引擎對應的名稱才能實現。掌握各大搜索引擎蜘蛛爬蟲,對我們開展網站SEO優化具有挺大作用,創新互聯小編搜集了各大搜索引擎的蜘蛛爬蟲UA,便于你需要時查看。
1、百度蜘蛛:BaiduSpider
百度公司還有其它幾個蜘蛛:Baiduspider-video(抓取視頻)、Baiduspider-news(抓取新聞)、Baiduspider-mobile(抓取wap),都不常見。
2、百度蜘蛛爬蟲UA:
PC端:Mozilla/5.0 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)
移動端:Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143 Safari/601.1 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)
圖片:“Baiduspider-image+(+http://www.baidu.com/search/spider.htm)”
3、谷歌蜘蛛:Googlebot
有人說谷歌蜘蛛是GoogleBot,官方谷歌蜘蛛最新名稱為Googlebot,還發現了Googlebot-Mobile,看名字是應該是抓取wap內容的。谷歌蜘蛛爬蟲UA:“Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)”,圖片:“Googlebot-Image/1.0”。
4、360蜘蛛:360Spider
它是一個十分“勤奮抓爬”的蜘蛛。360蜘蛛爬蟲UA:Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Trident/5.0);
5、搜狗蜘蛛:Sogou News Spider
搜狗公司還有其它幾個蜘蛛:Sogou web spider、Sogou inst spider、Sogou spider2、Sogou blog、Sogou Orion spider。搜狗蜘蛛爬蟲UA:“Sogou web spider/4.0(+http://www.sogou.com/docs/help/webmasters.htm#07)”
6、必應蜘蛛:bingbot
必應蜘蛛爬蟲UA:“Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)”
以上就是《搜索引擎蜘蛛爬蟲名大全匯總!》的全部內容,僅供站長朋友們互動交流學習,SEO優化是一個需要堅持的過程,希望大家一起共同進步。
分享題目:【網站優化】搜索引擎蜘蛛爬蟲名大全匯總!
URL分享:http://m.newbst.com/news15/121115.html
成都網站建設公司_創新互聯,為您提供軟件開發、品牌網站制作、關鍵詞優化、品牌網站建設、外貿建站、云服務器
聲明:本網站發布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網站立場,如需處理請聯系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經允許不得轉載,或轉載時需注明來源: 創新互聯
猜你還喜歡下面的內容