服務(wù)器開啟gzip后是否會(huì)影響蜘蛛抓取網(wǎng)站和蜘蛛的收錄量?

2014-09-24 瀏覽:150

服務(wù)器愛妻gzip壓縮,不會(huì)對(duì)spider抓取產(chǎn)生影響,我們會(huì)以壓縮的方式來抓取,并且也能夠節(jié)省站點(diǎn)的網(wǎng)絡(luò)流量。
正常情況下是有利無害的,但是服務(wù)器如果有問題gzip可能會(huì)導(dǎo)致百度抓取失敗,從而引發(fā)一系列問題。像硬防、GZP、CDN、DNS主動(dòng)防御等,本身并沒有問題,但是技術(shù)出現(xiàn)錯(cuò)誤就會(huì)出現(xiàn)各種問題,比如前段時(shí)間的新聞美橙互聯(lián)的DNS服務(wù)器檢測(cè)自動(dòng)防御時(shí),誤把百度蜘蛛IP當(dāng)做惡意IP屏蔽了,導(dǎo)致客戶網(wǎng)站被K。所以站長在啟用相關(guān)功能時(shí),一定要謹(jǐn)慎小心。

上一條: 站點(diǎn)啟用CDN加速對(duì)百度自然排名有什么影響?
下一條: 網(wǎng)頁速度會(huì)影響排名嗎?

新聞資訊

相關(guān)資訊