技術(shù):佳達教你識別真假Baiduspider
真假“李逵”大家都很熟悉,但作為一家專業(yè)網(wǎng)絡推廣/網(wǎng)站優(yōu)化公司,今天要教你的是如何識別真假Baiduspider。
首先,什么是真假Baiduspider?
根據(jù)百度百科的解釋:百度蜘蛛,是百度搜索引擎的一個自動程序。它的作用是訪問收集整理互聯(lián)網(wǎng)上的網(wǎng)頁、圖片、視頻等內(nèi)容,然后分門別類建立索引數(shù)據(jù)庫, 使用戶能在百度搜索引擎中搜索到您網(wǎng)站的網(wǎng)頁、圖片、視頻等內(nèi)容。
通俗地說,你的網(wǎng)站是什么樣的,在百度眼里,就是通過Baiduspider來識別的,所以說Baiduspider是一個我們與百度溝通的很重要的橋梁!
接著進入正題,如何識別真假Baiduspider?
可以通過DNS反查方式來解決這個問題。根據(jù)平臺不同驗證方法不同,如windows/linux/os三種平臺下的驗證方法分別如下:
1、在windows平臺或者IBM OS/2平臺下,您可以使用nslookup ip命令反解ip來 判斷是否來自Baiduspider的抓取。打開命令處理器 輸入nslookup xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 來判斷是否來自Baiduspider的抓取,Baiduspider的hostname以*.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即為冒充。
2、在linux平臺下,您可以使用host ip命令反解ip來判斷是否來自Baiduspider的抓取。
Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即為冒充。
3、在mac os平臺下,您可以使用dig 命令反解ip來 判斷是否來自Baiduspider的抓取。打開命令處理器 輸入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 來判斷是否來自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即為冒充。
了解這些信息之后,一些初學的站長就不用擔心誤封禁了Baiduspider的IP。
另外,如果站長發(fā)現(xiàn)Baiduspider光顧過于頻繁,已超越服務器承受能力;而百度站長平臺追查發(fā)現(xiàn),Baiduspider對該站點的抓取并無異常,那只spider極有可能是個李鬼,通過上述方法可以快速驗明正身!
轉(zhuǎn)載請注明出處?合肥網(wǎng)絡公司佳達科技專注于網(wǎng)站推廣?3k98.com