• 
    
      1. 熱烈祝賀閆寶龍博客重新改版上線

        當前位置:首頁 ? SEO優化 ? 正文

        助力全球營銷
        助力全球營銷

        做網站優化必須懂得有哪些搜索引擎蜘蛛

        762 人參與  2019年11月14日 11:42  分類 : SEO優化  評論

            1、百度蜘蛛:BaiduSpider

            常見的Baiduspider和Baiduspider-image(抓取圖片)

            百度公司還有其它幾個蜘蛛:Baiduspider-video(抓取視頻)、Baiduspider-news(抓取新聞)、Baiduspider-mobile(抓取wap),都不常見

            百度蜘蛛爬蟲UA:

            PC端:Mozilla/5.0(compatible;Baiduspider-render/2.0;+http://www.baidu.com/search/spider.html)

            移動端:Mozilla/5.0(iPhone;CPUiPhoneOS9_1likeMacOSX)AppleWebKit/601.1.46(KHTML,likeGecko)Version/9.0Mobile/13B143Safari/601.1(compatible;Baiduspider-render/2.0;+http://www.baidu.com/search/spider.html)

            圖片:“Baiduspider-image+(+http://www.baidu.com/search/spider.htm)”

            2、谷歌蜘蛛:Googlebot

            有人說谷歌蜘蛛是GoogleBot,官方谷歌蜘蛛最新名稱為Googlebot,還發現了Googlebot-Mobile,看名字是應該是抓取wap內容的

            谷歌蜘蛛爬蟲UA:

            “Mozilla/5.0(compatible;Googlebot/2.1;+http://www.google.com/bot.html)”

            圖片:“Googlebot-Image/1.0”

            3、360蜘蛛:360Spider

            它是一個十分“勤奮抓爬”的蜘蛛

            360蜘蛛爬蟲UA:

            Mozilla/5.0(compatible;MSIE9.0;WindowsNT6.1;Trident/5.0);

            4、搜狗蜘蛛:SogouNewsSpider

            搜狗公司還有其它幾個蜘蛛:Sogouwebspider、Sogouinstspider、Sogouspider2、Sogoublog、SogouOrionspider,冬鏡在日志中只發現了常見的SogouNewsSpider。(參考大神百度的robots文件,搜狗蜘蛛名稱可以用Sogou概括,但有沒有用就不知道了.)

            搜狗蜘蛛爬蟲UA:

            “Sogouwebspider/4.0(+http://www.sogou.com/docs/help/webmasters.htm#07)”

            5、必應蜘蛛:bingbot

            必應蜘蛛爬蟲UA:

            “Mozilla/5.0(compatible;bingbot/2.0;+http://www.bing.com/bingbot.htm)”

            6、SOSO蜘蛛:Sosospider

            騰訊已玩死,交給搜狗公司了

            soso蜘蛛爬蟲UA:

            “Sosospider+(+http://help.soso.com/webspider.htm)”

            7、雅虎蜘蛛:Yahoo!SlurpChina(雅虎中國)或Yahoo!Slurp(雅虎英文)

            雅虎蜘蛛爬蟲UA:

            雅虎中國:“Mozilla/5.0(compatible;Yahoo!SlurpChina;http://misc.yahoo.com.cn/help.html)”

            雅虎英文:“Mozilla/5.0(compatible;Yahoo!Slurp;http://help.yahoo.com/help/us/ysearch/slurp)”

            8、MSN蜘蛛:msnbot,msnbot-media

            重慶SEO好像只見到msnbot-media在狂爬……

            MSN蜘蛛爬蟲UA:

            *msnbot/1.0(+http://search.msn.com/msnbot.htm”)

            其它還有一搜蜘蛛:YisouSpider、Alexa蜘蛛:ia_archiver、宜搜蜘蛛:EasouSpider、即刻蜘蛛:JikeSpider,以及還有YandexBot、AhrefsBot和ezooms.bot等這些蜘蛛,據說這幾個國外的蜘蛛都不咋好

        有哪些蜘蛛.jpg

        打賞

        來源:閆寶龍博客(微信/QQ號:18097696),轉載請保留出處和鏈接!

        版權聲明1,本站轉載作品(包括論壇內容)出于傳遞更多信息之目的,不承擔任何法律責任,如有侵權請聯系管理員刪除。2,本站原創作品轉載須注明“稿件來源”否則禁止轉載!

        本文鏈接:http://www.haodesw.com/post/275.html

        承接百度優化推廣服務
        關鍵詞分類  繁體建站  閆寶龍從2007年進入互聯網行業至今從來不做不負責任的事情,不做不負責任的產品!效果為王,實效才是根本!相信閆寶龍絕對為您做超出您意料的成績!廢話不說,只是實干。近我者贏?。?!
        << 上一篇 下一篇 >>
        富海360精準營銷推廣服務

        • 評論(0)
        • 贊助本站

        百度愛采購7折開戶

        ◎歡迎參與討論,請在這里發表您的看法、交流您的觀點。

        搜索

        最近發表

        朋友,加個微信唄

          閆寶龍微信

        網站首頁 | 站長新聞 | 好文分享 | 內涵段子 | 科技資訊 | SEO優化 | 網絡營銷 | 外貿營銷 | 案例分享 | 寶龍隨記 | 免責說明 | 網站地圖

        Copyright 2005-2021 閆寶龍個人官方博客 網址:www.haodesw.com
        手機/微信:13991172090 QQ:18097696 郵箱:im@Yanbaolong.com 網站備案號:陜ICP備19006681號

        陜公網安備 61010402000538號

        人人操_人人碰_人人碰免费视频_人人干_人人摸_人人看_超碰97_超碰在线视频