10秒后自動(dòng)關(guān)閉
常用蜘蛛填寫(xiě)規(guī)則

蜘蛛設(shè)置-網(wǎng)站訪(fǎng)問(wèn)控制系統(tǒng)

 

一、蜘蛛限制模塊

網(wǎng)站訪(fǎng)問(wèn)控制系統(tǒng)-蜘蛛限制

 

二、蜘蛛填寫(xiě)規(guī)則

    1、內(nèi)容主要是參照服務(wù)器變量 HTTP_USER_AGENT 的值來(lái)分析,如:Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)

    2、設(shè)置完后保存,重啟IIS后才能立即生效。

    3、其他:

        Baiduspider-image+(+http://www.baidu.com/search/spider.htm)  

        Googlebot-Image/1.0

        Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

        Sogou web spider/4.0(+http://www.sogou.com/docs/help/webmasters.htm#07)

        Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)

用戶(hù)留言