創(chuàng)新互聯(lián)建站導(dǎo)讀:這個問題很簡單。因為網(wǎng)站后臺對于普通用戶來說沒有意義,為了解決蜘蛛抓取次數(shù),所以應(yīng)該禁止搜索引擎對網(wǎng)站后臺的抓取。
讓客戶滿意是我們工作的目標(biāo),不斷超越客戶的期望值來自于我們對這個行業(yè)的熱愛。我們立志把好的技術(shù)通過有效、簡單的方式提供給客戶,將通過不懈努力成為客戶在信息化領(lǐng)域值得信任、有價值的長期合作伙伴,公司提供的服務(wù)項目有:國際域名空間、虛擬空間、營銷軟件、網(wǎng)站建設(shè)、壽陽網(wǎng)站維護(hù)、網(wǎng)站推廣。
問題:robots需要禁止后臺目錄嗎?
問題補(bǔ)充:在設(shè)置robots的時候不太確定是否要禁止后臺目錄,是否需要禁止呢?
回答:要知道這個問題,首先得搞清楚robots的意思和作用,robots的作用主要是告訴搜索引擎哪些頁面可以抓取收錄,哪些頁面不要抓取收錄。
對于網(wǎng)站后臺,顯然是不需要搜索引擎抓取和收錄的,所以可以在robots設(shè)置禁止對網(wǎng)站后臺的抓取。通常來說,只要能打開的頁面鏈接搜索引擎蜘蛛都會去抓取,而蜘蛛抓取對于單個網(wǎng)站來說是有配額的,如果抓取后臺的次數(shù)多了,就浪費(fèi)了對其他有用頁面的抓取,從這個方面來說,后臺的頁面也是需要禁止抓取的。
關(guān)于robots是否需要禁止后臺目錄的問題,筆者就簡要的說這么多??傊畞碚f,這個問題很簡單。因為網(wǎng)站后臺對于普通用戶來說沒有意義,為了解決蜘蛛抓取次數(shù),所以應(yīng)該禁止搜索引擎對網(wǎng)站后臺的抓取。