是否應該建立robot.txt?這(zhè)個問題問昆明網絡公司就問對(duì)人了,robot.txt對(duì)于搜尋引擎而言是自身網站的一項閱讀規則,什麼(me)該被(bèi)讀取?什麼(me)不該被(bèi)讀取?在早期IT人員深信沒(méi)有robot.txt的網站將(jiāng)會(huì)導緻關鍵字搜尋排名的負面(miàn)影響。
而目前被(bèi)證實沒(méi)有建立robot.txt的網站并不會(huì)因此在關鍵字搜尋的排名中獲得劣勢,此爲一項迷思。不過(guò),robot.txt在網頁結構的設計上确實有它的功用所在,當自身網站有某些用于測試或是未公開(kāi)的網頁,利用robot.txt來遮蔽确實可免去被(bèi)搜尋引擎算法讀取,進(jìn)而被(bèi)認爲是未進(jìn)行SEO優化。