如何判斷百度蜘蛛是真假 為服務(wù)器減壓

作者：佚名   時(shí)間：2014-05-14   分享到：

很多站長(zhǎng)都發(fā)有發(fā)現(xiàn)一個(gè)問(wèn)題：我們的網(wǎng)站日志經(jīng)常有一些莫名其妙的類似百度蜘蛛一樣的信息，百度spider光顧過(guò)于頻繁，已超越服務(wù)器承受能力。而51統(tǒng)計(jì)網(wǎng)經(jīng)過(guò)和廣大站長(zhǎng)研究以及實(shí)驗(yàn)發(fā)現(xiàn)，Baiduspider對(duì)站點(diǎn)的抓取并無(wú)異常，而那些spider極有可能是假的蜘蛛，所以下面上海聯(lián)楷科技小編教大家怎么判斷百度蜘蛛的真假，為服務(wù)器減壓。

那么，我們應(yīng)該如何通過(guò)IP來(lái)判斷spider是不是來(lái)自百度搜索引擎的呢？

可以通過(guò)DNS反查方式來(lái)解決這個(gè)問(wèn)題。根據(jù)平臺(tái)不同驗(yàn)證方法不同，如linux/windows/os三種平臺(tái)下的驗(yàn)證方法分別如下：

1、在mac os平臺(tái)下，你可以使用dig 命令反解ip來(lái)判斷是否來(lái)自百度spider的抓取。打開(kāi)命令處理器，輸入dig xxx.xxx.xxx.xxx（IP地 址）就能解析ip， 來(lái)判斷是否來(lái)自Baiduspider的抓取，Baiduspider的hostname以*.baidu.com 或*.baidu.jp的格式命名。

                           推薦閱讀：》》》》》三大標(biāo)準(zhǔn)讓你判斷軟文質(zhì)量

       2、在linux平臺(tái)下，可以使用host ip命令反解ip來(lái)判斷是否來(lái)自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名。

3、在windows平臺(tái)或者IBM OS/2平臺(tái)下，可以使用nslookup ip命令反解ip來(lái) 判斷是否來(lái)自Baiduspider的抓取。打開(kāi)命令處理器 輸入nslookup xxx.xxx.xxx.xxx（IP地 址）就能解析ip， 來(lái)判斷是否來(lái)自Baiduspider的抓取，Baiduspider的hostname以*.baidu.com 或*.baidu.jp的格式命名。

溫馨提示：非 *.baidu.com 或 *.baidu.jp 格式命名的，即為假的為冒充。大家可以去試試以上說(shuō)的方法，聯(lián)楷小編可以經(jīng)過(guò)多次測(cè)試得出的結(jié)論哦，其實(shí)很多東西我們通過(guò)學(xué)習(xí)經(jīng)驗(yàn)總結(jié)，都會(huì)找到一個(gè)適合的處理方法。