站長(cháng)之家（Chianz.com）12月30日消息日前，百度站長(cháng)平臺2014年最后一場(chǎng)高端沙龍在廣州落下帷幕。本次沙龍圍繞著(zhù)搜索引擎優(yōu)化這一話(huà)題展開(kāi)了一些列的討論。百度站長(cháng)平臺專(zhuān)家王淘、草根個(gè)人站長(cháng)代表搜外創(chuàng )始人夫唯、以及大型網(wǎng)站代表太平洋SEO負責人黃勇一起探討了有關(guān)搜索引擎趨勢，搜索引擎喜好以及工程師們在實(shí)操中遇到的技術(shù)問(wèn)題。

在之前站長(cháng)之家發(fā)布的文章《對話(huà)百度站長(cháng)平臺：搜索引擎的趨勢和喜好》中分享了搜外創(chuàng )始人夫唯和百度lee代言人王淘關(guān)于搜索引擎趨勢及喜好的對話(huà)內容。今天要分享的是技術(shù)男們最關(guān)注的SEO實(shí)操方面的相關(guān)知識。

主要內容如下：

黃勇：有一天我們有一個(gè)網(wǎng)站發(fā)現來(lái)了非常多的爬蟲(chóng)，給服務(wù)器造成了極大的壓力。于是我們緊急屏蔽了所有爬蟲(chóng)IP和UA?？墒堑纫欢螘r(shí)間后，我們解除解禁后，卻發(fā)現恢復起來(lái)非常緩慢，基本上兩個(gè)月后才回到了當時(shí)的水平。大家的站越做越大，肯定會(huì )遇到龐大的訪(fǎng)問(wèn)壓力、抓蟲(chóng)抓取方面的問(wèn)題，所以想借此機會(huì )咨詢(xún)一下，看在這方面有沒(méi)有一個(gè)好的解決辦法。

王淘：理論上講，站點(diǎn)屏蔽了Baiduspider后的恢復周期的確比較長(cháng)，但是有沒(méi)有措施就請孫權講一下了。

孫權：通過(guò)封禁UA或IP的方式來(lái)拒絕百度蜘蛛，一天以上后果都是非常嚴重的。就這個(gè)問(wèn)題來(lái)說(shuō)目前沒(méi)有快速的方法可以讓你在短時(shí)間內恢復。這是站點(diǎn)自身運行的一個(gè)故障，并不是百度策略上面有什么問(wèn)題。還有就是，網(wǎng)站在無(wú)法訪(fǎng)問(wèn)期間，很多因子都會(huì )受到影響，百度在給網(wǎng)站進(jìn)行綜合打分時(shí)會(huì )綜合計算多個(gè)因子，所以說(shuō)，即使是網(wǎng)站訪(fǎng)問(wèn)恢復了，但其它因子的負面影響還在，網(wǎng)站恢復起來(lái)也還是非常困難的。

（接上）

觀(guān)眾提問(wèn)：用閉站保護能解決這個(gè)問(wèn)題嗎？

孫權：不能。閉站保護前提是把網(wǎng)站死掉，指的是爬蟲(chóng)不能抓取，同時(shí)用戶(hù)也訪(fǎng)問(wèn)不了。。

（接上）

王淘：其實(shí)我建議不管對什么樣的IP或者UA都不要直接封禁，設置502會(huì )好一點(diǎn)。

黃勇：當時(shí)我們也有想過(guò)設置502，但考慮到這個(gè)問(wèn)題不是短期內能夠解決的，擔心使用502被搜索引擎視為欺騙，畢竟是服務(wù)器的問(wèn)題嘛，應該是403，干嘛告訴人家說(shuō)是502。我們非常害怕因為使用取巧的做法而帶來(lái)更嚴重的后果

王淘：這個(gè)還好，如果你網(wǎng)頁(yè)明確不想讓搜索引擎訪(fǎng)問(wèn)就403就好了，如果走屏蔽其實(shí)502也無(wú)所謂，僅僅是我們浪費流量重新抓幾次，這是比較謹慎的情況。我們抓不到你們內容對我們來(lái)說(shuō)也是損失。

（接上）

孫權：可能很多站長(cháng)會(huì )問(wèn)，為什么我的站持續一段時(shí)間訪(fǎng)問(wèn)不了后排名會(huì )掉得那么厲害，就是因為百度認為網(wǎng)站可訪(fǎng)問(wèn)性有問(wèn)題，目前百度對可訪(fǎng)問(wèn)性有問(wèn)題的網(wǎng)站打壓是非常厲害的。所以，面對網(wǎng)站爬蟲(chóng)訪(fǎng)問(wèn)量突增的情況，我不建議站長(cháng)立刻去封我們的爬蟲(chóng)，你可以通過(guò)百度站長(cháng)平臺抓取頻次工具，把這個(gè)爬蟲(chóng)壓力調低，但是不可以封掉。比如本來(lái)一天來(lái)抓50萬(wàn)，你調低到2萬(wàn)，我們后臺的Spider策略都是認這個(gè)值的。

黃勇：《301跳轉常見(jiàn)問(wèn)題匯總》文章中提到站點(diǎn)設置301后，百度不會(huì )刪除舊網(wǎng)頁(yè)，新舊網(wǎng)頁(yè)同時(shí)存在，百度在搜索結果中會(huì )優(yōu)先展現新網(wǎng)頁(yè)，但實(shí)際情況是，會(huì )發(fā)生新舊頁(yè)面交替獲得排名的現象，這是什么原因?

王淘：這個(gè)問(wèn)題主要是由我們的系統造成的。我們系統有非常多的模塊，每個(gè)模塊都要去單獨處理301更替，偶爾有一些模塊的處理邏輯可能有出現問(wèn)題，可能出現一些波動(dòng)。我們在6月份左右時(shí)做過(guò)一次大規模的改進(jìn)，基本上把所有的模塊都理了一遍，把所有歸一化都做了統一，現在這樣的問(wèn)題比較少了。

黃勇：百度快照時(shí)間與頁(yè)面質(zhì)量、抓取更新頻率是否有什么關(guān)系？

王淘：快照時(shí)間沒(méi)有任何參考價(jià)值，在排序時(shí)我們使用單獨的抓取時(shí)間統計系統，外部不可見(jiàn)，站點(diǎn)完全不用關(guān)注百度的快照時(shí)間。

黃勇：文章頁(yè)的邊欄、底部部署大量與當前文章間接相關(guān)的鏈接，是否會(huì )認被為噪聲？是否影響頁(yè)面本身內容識別和收錄？

王淘：網(wǎng)頁(yè)在建庫時(shí)會(huì )判斷頁(yè)面的主體內容，而邊框這部分的內容基本不算在內，所以基本不會(huì )有影響，只有一些鏈接發(fā)現的作用。

黃勇：Canonical 的使用范圍，百度提到高度相似，這個(gè)高度相似到底是什么標準？例如這兩個(gè)頁(yè)面：

http://v.duowan.com/u/122769172

http://v.duowan.com/index.php?r=user/videolist&uid=122769172

王淘：高度相似是指網(wǎng)站的標題、主體內容以及網(wǎng)站的結構都相似，從這個(gè)案例來(lái)看網(wǎng)站結構不同，對Baiduspider來(lái)說(shuō)完全是兩個(gè)不同頁(yè)面，canonical標簽不會(huì )生效。

黃勇：請問(wèn)百度如何看待一個(gè)采集了優(yōu)質(zhì)內容，但瀏覽體驗和訪(fǎng)問(wèn)性都好的網(wǎng)站？

王淘：對于百度來(lái)說(shuō)，能夠提供滿(mǎn)足用戶(hù)需求的內容、有良好用戶(hù)體驗的網(wǎng)站就是好網(wǎng)站。有些站點(diǎn)從從外站轉載來(lái)內容，經(jīng)過(guò)加工提供了內容增益，更好的滿(mǎn)足了用戶(hù)需求，同樣可以得到好的展現。