百度站長(zhǎng)平臺(tái)發(fā)布公告宣布新版Baiduspider移動(dòng)ua上線,同時(shí)公布了PC版Baiduspider ua,那么該如何正確識(shí)別移動(dòng)ua呢?我們百度站長(zhǎng)平臺(tái)技術(shù)專(zhuān)家孫權(quán)老師給出了答案: 之前通過(guò)“+http://www.baidu.com/search/spider.html”進(jìn)行識(shí)別的網(wǎng)站請(qǐng)注意!您需要修改識(shí)別方式,新的正確的識(shí)別Baiduspider移動(dòng)ua的方法如下: 另外需要強(qiáng)調(diào)的是,對(duì)于robots封禁,如果封禁的agent是Baiduspider,會(huì)對(duì)PC和移動(dòng)同時(shí)生效。即,無(wú)論是PC還是移動(dòng)Baiduspider,都不會(huì)對(duì)封禁對(duì)象進(jìn)行抓取。之所以要強(qiáng)調(diào)這一點(diǎn),是發(fā)現(xiàn)有些代碼適配站點(diǎn)(同一個(gè)url,PC ua打開(kāi)的時(shí)候是PC頁(yè),移動(dòng)ua打開(kāi)的時(shí)候是移動(dòng)頁(yè)),想通過(guò)設(shè)置robots的agent封禁達(dá)到只讓移動(dòng)Baiduspider抓取的目的,但由于PC和移動(dòng)Baiduspider的agent都是Baiduspider,這種方法是非常不可取的。 |