這個方法你值得擁有。尤其是使用php虛擬主機(jī)在線建站的用戶，非常使用。我們總是擔(dān)心，當(dāng)我們網(wǎng)站在建設(shè)、調(diào)試過程中非常擔(dān)心搜索引擎收錄了我們的調(diào)試頁面，收錄了不該收錄的內(nèi)容。這是我們網(wǎng)站建設(shè)初期最擔(dān)心的事情。

你也許會說寫一個robots.txt文件，拒絕“蜘蛛”不就可以了嗎？親身體驗告訴我，這不是最好的，不知道出于什么原因，蜘蛛還是能爬到內(nèi)容，如果你的網(wǎng)站調(diào)試時間非常長的話，那就更加危險。所以，無憂主機(jī)向大家推薦100%絕對有效、無錯的方法。

1、方法一。適合調(diào)試時間不長，就幾天的站長。就是寫一個robots.txt，放在網(wǎng)站目錄下，拒絕 “蜘蛛”。 robots.txt內(nèi)容如下：

User-agent: *

Disallow: /

2、方法二。修改本地hosts文件強(qiáng)制解析域名。具體操作步驟如下：

A、???????????????? 首先是在無憂php空間上綁定你的網(wǎng)站域名。如：51php.com

B、???????????????? 修改本地hosts文件，將域名強(qiáng)制解析到本地。修改hosts文件的詳細(xì)方法參閱：無憂主機(jī)環(huán)境下域名解析未生效前如何調(diào)試安裝網(wǎng)站

務(wù)必注意：域名一定不要解析，在網(wǎng)站還沒完全確認(rèn)建設(shè)完畢前，一定不要把域名A記錄解析到空間IP上去。請安裝A、B介紹的步驟去做，就不用擔(dān)心域名不解析，也一定可以訪問。

本方法可以絕對保證蜘蛛無法爬取你正在建設(shè)的網(wǎng)站。

本文地址：http://www.gle-technology.com/seo/5067.html