天天干天天操天天舔,色污淫免费,正在播放亚洲一区,天天上天天干

鑫諾商資訊

首頁(yè) - 新聞資訊 > 鑫諾商資訊

濟(jì)南seo教你適時(shí)的拒絕蜘蛛

來(lái)源:http://m.k6uh.com   發(fā)布時(shí)間:2016-06-22      

  濟(jì)南seo做的是使搜索引擎快速索引頁(yè)面,從而增加權(quán)重和訪問量。由此站長(zhǎng)喜歡蜘蛛將網(wǎng)站爬個(gè)遍,吃個(gè)透。但是讓蜘蛛肆無(wú)忌憚的去爬行真的就有益于網(wǎng)站優(yōu)化嗎?很多站長(zhǎng)在robotts.txt文本中可能除了ADMIN、DATA目錄限制蜘蛛爬行,其他目錄任蜘蛛索引。筆者要說(shuō),做網(wǎng)站優(yōu)化除了一些安全目錄外再應(yīng)適度屏蔽一些目錄,禁止搜索引擎的索引是有益無(wú)害的。

一、圖片目錄的屏蔽

  圖片是構(gòu)成網(wǎng)站組成的主要元素,然而主題模板中類似的圖片在搜索引擎中鋪天蓋地,搜索引擎一遍遍的索引下去還會(huì)進(jìn)行收錄嗎?即使收錄了,所帶的效果也是微乎其微的。還浪費(fèi)了大量的帶寬。一般我們常屏蔽的目錄為“images、images”。

二、緩存目錄的屏蔽

  很多程序都具有緩存目錄,拿z-blog這個(gè)程序來(lái)舉例子,它的緩存目錄為“CACHE”,其中會(huì)有著不少已經(jīng)生成HTML的緩存文件。如果蜘蛛繼續(xù)進(jìn)行索引的話,無(wú)疑是造成了重復(fù)內(nèi)容的索引,這對(duì)網(wǎng)站是有害無(wú)益的。當(dāng)然,其他程序還有這各自不同的緩存目錄,針對(duì)性的進(jìn)行屏蔽才為適宜。

三、模板目錄的屏蔽

  對(duì)于程序的模板,大多站長(zhǎng)都選擇了直接套用而非獨(dú)立模板。模板的高度重復(fù)性也成為了一個(gè)搜索引擎中信息的冗余,因此利用Robots.txt來(lái)進(jìn)行模板的屏蔽也是有益無(wú)害的。且模板文件常常與生成文件高度相似,同樣易造成雷同內(nèi)容的出現(xiàn)。

四、CSS目錄的屏蔽

  CSS目錄,搜索引擎抓取無(wú)用,所以我們?cè)谠O(shè)置Robots.txt文件中將其進(jìn)行屏蔽,以提高搜索引擎的索引質(zhì)量。為搜索引擎提供一個(gè)簡(jiǎn)潔明了的索引環(huán)境更易提升網(wǎng)站友好性。

五、部分程序的RSS頁(yè)

  此條只針對(duì)存在RSS頁(yè)的程序來(lái)講,一般博客中比較常見。此頁(yè)面可以說(shuō)是一個(gè)高度重復(fù)的頁(yè)面,完全有必要進(jìn)行屏蔽,以增強(qiáng)網(wǎng)站在搜索引擎中的友好性。

六、屏蔽雙頁(yè)面的內(nèi)容

  一個(gè)可以生成靜態(tài)頁(yè)面的網(wǎng)站,一般來(lái)說(shuō)動(dòng)態(tài)頁(yè)面也是可以訪問的,兩者若被搜索引擎完全索引,無(wú)疑是訪問到了完全一致的內(nèi)容,對(duì)搜索引擎友好性來(lái)說(shuō)是有害無(wú)益的。而我們屏蔽的往往都是后者,因?yàn)榍罢唔?yè)面為靜態(tài),更易被搜索引擎索引收錄。

七、涉及程序安全頁(yè)

  在起始位置我們交代了屏蔽ADMIN、DATA目錄,防止安全目錄與數(shù)據(jù)庫(kù)泄露。另外數(shù)據(jù)庫(kù)目錄、網(wǎng)站日志目錄、備份目錄都是需要進(jìn)行屏蔽的,都是可以有效減少“泄密”現(xiàn)象的發(fā)生。

八、屏蔽文件形式

  一些站長(zhǎng)總是喜歡將網(wǎng)站備份后方到網(wǎng)站下載后忘記刪除,或者根本不做下載,直接保留到服務(wù)器。但是大家都知道,網(wǎng)站發(fā)展壯大必定受到一些人的窺視,網(wǎng)站一次次的被嘗試下在數(shù)據(jù)庫(kù)、備份文件,稍微有點(diǎn)名次的網(wǎng)站都會(huì)受到類似的攻擊。利用robots.txt屏蔽類似“rar、zip”等類似的文件。實(shí)質(zhì)上,這樣的屏蔽方式更有益于“第七點(diǎn)”,但是做到的仍然只是局部。

獲取互聯(lián)網(wǎng)策劃方案