技術(shù):佳達(dá)教你識(shí)別真假Baiduspider
真假“李逵”大家都很熟悉,但作為一家專業(yè)網(wǎng)絡(luò)推廣/網(wǎng)站優(yōu)化公司,今天要教你的是如何識(shí)別真假Baiduspider。
首先,什么是真假Baiduspider?
根據(jù)百度百科的解釋:百度蜘蛛,是百度搜索引擎的一個(gè)自動(dòng)程序。它的作用是訪問(wèn)收集整理互聯(lián)網(wǎng)上的網(wǎng)頁(yè)、圖片、視頻等內(nèi)容,然后分門別類建立索引數(shù)據(jù)庫(kù), 使用戶能在百度搜索引擎中搜索到您網(wǎng)站的網(wǎng)頁(yè)、圖片、視頻等內(nèi)容。
通俗地說(shuō),你的網(wǎng)站是什么樣的,在百度眼里,就是通過(guò)Baiduspider來(lái)識(shí)別的,所以說(shuō)Baiduspider是一個(gè)我們與百度溝通的很重要的橋梁!
接著進(jìn)入正題,如何識(shí)別真假Baiduspider?
可以通過(guò)DNS反查方式來(lái)解決這個(gè)問(wèn)題。根據(jù)平臺(tái)不同驗(yàn)證方法不同,如windows/linux/os三種平臺(tái)下的驗(yàn)證方法分別如下:
1、在windows平臺(tái)或者IBM OS/2平臺(tái)下,您可以使用nslookup ip命令反解ip來(lái) 判斷是否來(lái)自Baiduspider的抓取。打開(kāi)命令處理器 輸入nslookup xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 來(lái)判斷是否來(lái)自Baiduspider的抓取,Baiduspider的hostname以*.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即為冒充。
2、在linux平臺(tái)下,您可以使用host ip命令反解ip來(lái)判斷是否來(lái)自Baiduspider的抓取。
Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即為冒充。
3、在mac os平臺(tái)下,您可以使用dig 命令反解ip來(lái) 判斷是否來(lái)自Baiduspider的抓取。打開(kāi)命令處理器 輸入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 來(lái)判斷是否來(lái)自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即為冒充。
了解這些信息之后,一些初學(xué)的站長(zhǎng)就不用擔(dān)心誤封禁了Baiduspider的IP。
另外,如果站長(zhǎng)發(fā)現(xiàn)Baiduspider光顧過(guò)于頻繁,已超越服務(wù)器承受能力;而百度站長(zhǎng)平臺(tái)追查發(fā)現(xiàn),Baiduspider對(duì)該站點(diǎn)的抓取并無(wú)異常,那只spider極有可能是個(gè)李鬼,通過(guò)上述方法可以快速驗(yàn)明正身!
轉(zhuǎn)載請(qǐng)注明出處?合肥網(wǎng)絡(luò)公司佳達(dá)科技專注于網(wǎng)站推廣?3k98.com