屏蔽蜘蛛不同情況不同對待
2016-11-02 分類： 網(wǎng)站建設(shè)
網(wǎng)站優(yōu)化就要跟搜索引擎套近乎，因為搜索引擎的智能化并不像人，它們是沒有一點人情味在里面的。有些時候我們?yōu)榱俗龊镁W(wǎng)站優(yōu)化，要適當?shù)仄帘沃┲耄?a >成都網(wǎng)站建設(shè)小編就來簡單介紹一下。
因為網(wǎng)站模板和圖片的出現(xiàn)，網(wǎng)站建設(shè)就方便的多了，蜘蛛對這些網(wǎng)站是有些排斥的，搜索引擎就會認為你的網(wǎng)站是在作弊，所有想要屏蔽蜘蛛，就要使用images目錄，這種目錄可以有效的屏蔽蜘蛛。
蜘蛛很好吃，你喂給它東西吃，它是不會有喊飽的，前面分析了蜘蛛飼養(yǎng)要點。如果網(wǎng)站緩存目錄中有內(nèi)容，蜘蛛也是不會放過的。目錄里的內(nèi)容跟網(wǎng)站中的內(nèi)容是一樣的，這樣的話，蜘蛛抓取了同樣的內(nèi)容，百度算法也是不會放過你的，這會給網(wǎng)站權(quán)重帶去影響。為了避免這樣的情況發(fā)生，建站程序的緩存目錄都是不同的，所以每個不同網(wǎng)站的程序要有相應(yīng)的緩存目錄去有效屏蔽蜘蛛。
另外一種酒是CSS目錄和RSS頁也會讓搜索引擎發(fā)生錯誤判斷，CSS目錄對蜘蛛沒什么大的作用，相反抓取完了之后會影響它的判斷。這個時候就可以使用robots.txt文件屏蔽。RSS頁這種建站程序也是重復(fù)的內(nèi)容，所以也需要屏蔽。
一般來說雙頁面網(wǎng)站還是比較少的，如果是動態(tài)靜態(tài)雙頁面，那么網(wǎng)站最好能屏蔽動態(tài)頁面。網(wǎng)站很多種URL都能指向同一個頁面，如果不屏蔽的話，這兩個頁面就會被抓取，這樣的話就是很明顯的作弊，所以一定要屏蔽動態(tài)頁面。
因為網(wǎng)站模板和圖片的出現(xiàn)，網(wǎng)站建設(shè)就方便的多了，蜘蛛對這些網(wǎng)站是有些排斥的，搜索引擎就會認為你的網(wǎng)站是在作弊，所有想要屏蔽蜘蛛，就要使用images目錄，這種目錄可以有效的屏蔽蜘蛛。
蜘蛛很好吃，你喂給它東西吃，它是不會有喊飽的，前面分析了蜘蛛飼養(yǎng)要點。如果網(wǎng)站緩存目錄中有內(nèi)容，蜘蛛也是不會放過的。目錄里的內(nèi)容跟網(wǎng)站中的內(nèi)容是一樣的，這樣的話，蜘蛛抓取了同樣的內(nèi)容，百度算法也是不會放過你的，這會給網(wǎng)站權(quán)重帶去影響。為了避免這樣的情況發(fā)生，建站程序的緩存目錄都是不同的，所以每個不同網(wǎng)站的程序要有相應(yīng)的緩存目錄去有效屏蔽蜘蛛。
另外一種酒是CSS目錄和RSS頁也會讓搜索引擎發(fā)生錯誤判斷，CSS目錄對蜘蛛沒什么大的作用，相反抓取完了之后會影響它的判斷。這個時候就可以使用robots.txt文件屏蔽。RSS頁這種建站程序也是重復(fù)的內(nèi)容，所以也需要屏蔽。
一般來說雙頁面網(wǎng)站還是比較少的，如果是動態(tài)靜態(tài)雙頁面，那么網(wǎng)站最好能屏蔽動態(tài)頁面。網(wǎng)站很多種URL都能指向同一個頁面，如果不屏蔽的話，這兩個頁面就會被抓取，這樣的話就是很明顯的作弊，所以一定要屏蔽動態(tài)頁面。
文章名稱：屏蔽蜘蛛不同情況不同對待
文章URL：http://www.js-pz168.com/news33/58183.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供企業(yè)建站、網(wǎng)站建設(shè)、App開發(fā)、建站公司、關(guān)鍵詞優(yōu)化、服務(wù)器托管
聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時需注明來源： 創(chuàng)新互聯(lián)
猜你還喜歡下面的內(nèi)容
- 站長解析“百度慢三拍” 2016-11-02
- 站長如何看待二級域名和二級目錄 2016-11-02
- 提升網(wǎng)站權(quán)重必殺技——增加反向鏈接 2016-11-01
- 解析成都網(wǎng)絡(luò)公司如何處理死鏈接！ 2016-11-01
- 新站外鏈從何而來 2016-11-02
- 降權(quán)網(wǎng)站恢復(fù)三重點 2016-11-02
- 網(wǎng)站優(yōu)化不可或缺的標簽 2016-11-01
- 如何通過內(nèi)鏈提升網(wǎng)站權(quán)重？ 2016-11-01
- 成都網(wǎng)絡(luò)公司談互聯(lián)網(wǎng)影響著人們的全部！ 2016-11-01
- 長尾關(guān)鍵詞背后的蔥郁森林 2016-11-01
- 新手入門必知關(guān)鍵字堆砌的形式 2016-11-01
- 成都網(wǎng)絡(luò)公司解答何為SEO鏈輪！ 2016-11-01
- 為什么網(wǎng)站會同時出現(xiàn)兩個首頁快照？ 2016-11-01
- 成都網(wǎng)絡(luò)公司訪問量流失的原因有哪些？ 2016-11-01
- 網(wǎng)站優(yōu)化最強大裝備——百度統(tǒng)計 2016-11-01
- 新手外鏈查詢常識介紹！ 2016-11-01
- 網(wǎng)站推廣最紅六種鏈接分類介紹 2016-11-01
- 高品質(zhì)企業(yè)郵箱未來具有發(fā)展?jié)摿?/a> 2016-11-01
- 外鏈四原則你知道嗎 2016-11-01