如何識(shí)別Baiduspider
- 威海Spider 威海Baiduspider
- 1608
上周百度站長(zhǎng)平臺(tái)接到某站長(zhǎng)求助，表示誤封禁了Baiduspider的IP，詢問(wèn)是否有辦法獲得Baiduspider的所有IP，打算放入白名單加以保護(hù)，防止再次誤封。在此要告訴各位站長(zhǎng)，Baiduspider的IP池是不斷變動(dòng)的，我們無(wú)法提供IP全集。
除此之外，之前還有站長(zhǎng)發(fā)來(lái)質(zhì)疑說(shuō)Baiduspider光顧過(guò)于頻繁，已超越服務(wù)器承受能力。而百度站長(zhǎng)平臺(tái)追查發(fā)現(xiàn)，Baiduspider對(duì)該站點(diǎn)的抓取并無(wú)異常，那只spider極有可能是個(gè)李鬼。
那么，站長(zhǎng)該如何通過(guò)IP來(lái)判斷此spider是不是來(lái)自百度搜索引擎的呢？
可以通過(guò)DNS反查方式來(lái)解決這個(gè)問(wèn)題。根據(jù)平臺(tái)不同驗(yàn)證方法不同，如linux/windows/os三種平臺(tái)下的驗(yàn)證方法分別如下：
1、在linux平臺(tái)下，您可以使用host ip命令反解ip來(lái)判斷是否來(lái)自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名，非 *.baidu.com 或 *.baidu.jp 即為冒充。
2、在windows平臺(tái)或者IBM OS/2平臺(tái)下，您可以使用nslookup ip命令反解ip來(lái) 判斷是否來(lái)自Baiduspider的抓取。打開(kāi)命令處理器 輸入nslookup xxx.xxx.xxx.xxx（IP地 址）就能解析ip， 來(lái)判斷是否來(lái)自Baiduspider的抓取，Baiduspider的hostname以*.baidu.com 或*.baidu.jp 的格式命名，非 *.baidu.com 或 *.baidu.jp 即為冒充。
3、在mac os平臺(tái)下，您可以使用dig 命令反解ip來(lái) 判斷是否來(lái)自Baiduspider的抓取。打開(kāi)命令處理器 輸入dig xxx.xxx.xxx.xxx（IP地 址）就能解析ip， 來(lái)判斷是否來(lái)自Baiduspider的抓取，Baiduspider的hostname以 *.baidu.com 或*.baidu.jp 的格式命名，非 *.baidu.com 或 *.baidu.jp 即為冒充。
如果大家對(duì)如何識(shí)別Baiduspider還有別的疑問(wèn)，大家可以到[學(xué)堂同學(xué)匯][學(xué)習(xí)討論] 《如何識(shí)別Baiduspider》討論帖中發(fā)表自己的看法，我們的工作人員會(huì)關(guān)注這里并與大家進(jìn)行探討。
來(lái)源：百度搜索資源平臺(tái) 百度搜索學(xué)堂
