在前一段時間百度召開了“框計算”發(fā)布會，在百度CTO演講的時候曾說到一句話要點亮暗網，當然百度CTO所說的暗網是指在整個互聯(lián)網不被人們察覺關注的網絡，點亮暗網是搜索引擎奮斗的目標，作為SEO工作者還要關注的另一個暗網就是自己網站內部不被搜索引擎收錄的網頁。這是站長對網站優(yōu)化中要關注的一點。
1、怎么判斷暗網
出現(xiàn)網站內部的"暗網"意味著什么?最明顯的一點就是網站內部結構設計存在很大的缺陷，尤其是那些在搜索引擎中收錄比例很少的情況，那網站內部結構的就很嚴重了。當然搜索引擎不可能對網站中的任何一個網頁都會收錄但是一個網站內部結構優(yōu)化到位的其在搜索引擎中的收錄量一定是很高的。搜索引擎爬蟲光臨網站的頻率的表現(xiàn)是網站快照，一個網站內部結構優(yōu)化不到位的網站其快照也是會受到影響的，有的網中看他的快照比較新但是網站內部的網頁卻不被收錄，更有甚者在網站快照中可以看到最近發(fā)布的網頁但是直接搜索網頁URL或用谷歌查詢語法查詢卻找不到網頁這是網站內部暗網的一個標志，如果出現(xiàn)這種情況了那就要對網站內部結構進行考慮了。
2、造成暗網的原因
1>網站URL及內部結構設計
搜索引擎對網站的爬行收錄是按照鏈接進行的，所有從事SEO甚至剛從事SEO的人都會知道的一點就是網站URL優(yōu)化，網站的URL中包含有搜索引擎程序所不能識別的特殊符號以至于搜索引擎蜘在進入網站之后在爬行完所在網頁中的鏈接之后不能再根據(jù)鏈接區(qū)爬行網站中的其他網頁，還需要注意的一點就是網站內如結構設計不合理，在搜索引擎爬行到一個網頁之后找不到能爬行到其他網頁的鏈接那搜索引擎程序也會撤兵的，所以網站中的URL優(yōu)化之最重要的一點。
2>網站中原創(chuàng)內容
當網站中內容有加大量轉載的內容也會影響搜索引擎對網站的收錄和爬行，當搜索引擎對網頁爬行之后該網頁中大量的搜索引擎數(shù)據(jù)庫中已經有的東西拿搜索引擎為什么要再對你的網站再收錄一次呢?搜索引擎數(shù)據(jù)庫中也會對網站有一定的記錄，長時間的轉載內容也會降低搜索引擎對網站的爬行頻率。
3>網站更新頻率
網站的更新頻率是決定搜索引擎對網站爬行頻率的重要一點，從搜索引擎的對網站的快照可以發(fā)現(xiàn)有的網站搜索引擎會幾個小時甚至更短的時間去光顧，因為里面有很多更新的網頁，搜索引擎能及時的將更新的網頁收錄到自己的數(shù)據(jù)庫中，及時的呈現(xiàn)到用戶面前也是提高搜索引擎的用戶體驗。
4>網站的外部鏈接
除了網站內部鏈接優(yōu)化不到位會造成暗網之外，網站外鏈也很重要，在搜索引擎對整個互聯(lián)網按照鏈接進行爬行時，一個網站擁有大量的外鏈就會增大搜索引擎爬蟲光臨網站的次數(shù)。當然高質量的網站外鏈是前提，一個網站擁有很多的外部鏈接但是鏈接所在的網站搜索引擎爬蟲光顧該網站的頻率更小那網站也不會因為此鏈接而增大搜索引擎爬蟲光臨的機會。
3、如何解決暗網
就網站內部URL來說有效的方法就是URL靜態(tài)化，程序語言都支持這點，大型動態(tài)網站可以URL重寫或偽靜態(tài)，都會增加搜索引擎對網站的收錄，對于其他原因造成的暗網那就要站長及時頂起的為網站增加原創(chuàng)內容。當然不提倡站長增加偽原創(chuàng)內容，雖然偽原創(chuàng)會吸引搜索引擎爬蟲但是會降低網站的用戶體驗，搜索引擎程序來了走了用戶就不合算了。
點亮暗網不只是搜索引擎的目的也是所有從事SEO工作者要關注的一點。
1>搜索引擎對網站的爬行收錄是按照鏈接進行的，所有從事SEO甚至剛從事SEO的人都會知道的一點就是網站URL優(yōu)化，網站的URL中包含有搜索引擎程序所不能識別的特殊符號以至于搜索引擎蜘在進入網站之后在爬行完所在網頁中的鏈接之后不能再根據(jù)鏈接區(qū)爬行網站中的其他網頁，還需要注意的一點就是網站內如結構設計不合理，在搜索引擎爬行到一個網頁之后找不到能爬行到其他網頁的鏈接那搜索引擎程序也會撤兵的，所以網站優(yōu)化的不止是URL而是整站優(yōu)化。
2>網站中原創(chuàng)內容
當網站中內容有加大量轉載的內容也會影響搜索引擎對網站的收錄和爬行，當搜索引擎對網頁爬行之后該網頁中大量的搜索引擎數(shù)據(jù)庫中已經有的東西拿搜索引擎為什么要再對你的網站再收錄一次呢?搜索引擎數(shù)據(jù)庫中也會對網站有一定的記錄，長時間的轉載內容也會降低搜索引擎對網站的爬行頻率。站長及時頂起的為網站增加原創(chuàng)內容。當然不提倡站長增加偽原創(chuàng)內容，雖然偽原創(chuàng)會吸引搜索引擎爬蟲但是會降低網站的用戶體驗，搜索引擎程序來了走了用戶就不合算了。
3>網站更新頻率
網站的更新頻率是決定搜索引擎對網站爬行頻率的重要一點，從搜索引擎的對網站的快照可以發(fā)現(xiàn)有的網站搜索引擎會幾個小時甚至更短的時間去光顧，因為里面有很多更新的網頁，搜索引擎能及時的將更新的網頁收錄到自己的數(shù)據(jù)庫中，及時的呈現(xiàn)到用戶面前也是提高搜索引擎的用戶體驗。
4>網站的外部鏈接
除了網站內部鏈接優(yōu)化不到位會造成暗網之外，網站外鏈也很重要，在搜索引擎對整個互聯(lián)網按照鏈接進行爬行時，一個網站擁有大量的外鏈就會增大搜索引擎爬蟲光臨網站的次數(shù)。當然高質量的網站外鏈是前提，一個網站擁有很多的外部鏈接但是鏈接所在的網站搜索引擎爬蟲光顧該網站的頻率更小那網站也不會因為此鏈接而增大搜索引擎爬蟲光臨的機會。
點亮暗網不只是搜索引擎的目的也是所有從事SEO工作者要關注的一點。
原創(chuàng)文章如轉載如轉載請注明：思靜石網絡營銷博客 [www.peryx.cn]
申請創(chuàng)業(yè)報道，分享創(chuàng)業(yè)好點子。點擊此處，共同探討創(chuàng)業(yè)新機遇！
