當(dāng)前位置：首頁 >  站長 >  建站經(jīng)驗(yàn) >  正文

談?wù)勗趺蠢梅?wù)器日志來分析我們頁面為什么不被收錄

 2014-07-11 19:59  來源： 用戶投稿   我來投稿 撤稿糾錯(cuò)

　 域名預(yù)訂/競價(jià)，好“米”不錯(cuò)過

很多人都在說原創(chuàng)，每天去采集，然后修改后，重新發(fā)到自己的網(wǎng)站上，但是不知道你木有想過一個(gè)問題，我們發(fā)的文章有沒有意義，為什么不被收錄，蜘蛛怎么去認(rèn)為我們發(fā)的文章有沒有意義。

在這之前，我們得知道服務(wù)器日志在哪里尋找，服務(wù)器日志一般存在于FTP空間一個(gè)Log的文件夾下，并且是tor后綴結(jié)尾。將他下載后，解壓后我們得到倆個(gè)文件，將有大小文件后綴名更改為域名.txt 然后打開。我們會(huì)得到一大串文字字符，不要擔(dān)心從何看起，我們一條條的分析。但是我們首先得知道那些IP所代表的意思。下面我都列出來了。

Baiduspider=Baiduspider蜘蛛

Googlebot=Googlebot蜘蛛

Sogou=Sogou蜘蛛

Yahoo=Yahoo蜘蛛

360Spider=360Spider蜘蛛

123.125.68.=123.125.68沙盒

220.181.68.=220.181.68沙盒

220.181.7.=220.181.7預(yù)備抓取

123.125.66.=123.125.66預(yù)備抓取

121.14.89.=121.14.89新站考察

203.208.60.=203.208.60網(wǎng)站異常

210.72.225.=210.72.225巡邏

123.125.71.106=123.125.71.106低權(quán)重

123.125.71.95=123.125.71.95低權(quán)重

123.125.71.97=123.125.71.97低權(quán)重

123.125.71.117=123.125.71.117低權(quán)重

123.125.71.=123.125.71低權(quán)重匯總

220.181.108.95=220.181.108.95隔日快照

220.181.108.92=220.181.108.92權(quán)重抓取

220.181.108.91=220.181.108.91綜合權(quán)重

220.181.108.75=220.181.108.75內(nèi)頁權(quán)重

220.181.108.86=220.181.108.86權(quán)重首頁

220.181.108.89=220.181.108.89權(quán)重首頁

220.181.108.94=220.181.108.94權(quán)重首頁

220.181.108.97=220.181.108.97權(quán)重首頁

220.181.108.80=220.181.108.80權(quán)重首頁

220.181.108.77=220.181.108.77權(quán)重首頁

220.181.108.83=220.181.108.83權(quán)重首頁

220.181.108.=220.181.108權(quán)重蜘蛛?yún)R總

我們就其中一條分析

123.125.68.45 - - [24/Jun/2014 15:12:04 +0800] 'GET /xingyexinwen/129.html HTTP/1.1' 200 9107 '-' 'Mozilla/5.0 (Windows; U; Windows NT 5.1; zh-CN; rv:1.9.2.12) Gecko/20101026 Firefox/3.6.12 QQDownload/1.7'

根據(jù)上面的定義分析：

123.125.68.45 - - [24/Jun/2014 15:12:04 +0800] 'GET /xingyexinwen/129.html這句話代表的意思是谷歌蜘蛛在2014年6月24號(hào)，15:12:04來我的網(wǎng)站抓取了xingyexinwen/129.html 這么一條URL，然后將其放到沙盒中(123.125.68.45 代表沙盒蜘蛛。)

HTTP/1.1' 200 9107 '-' 'Mozilla/5.0 (Windows; U; Windows NT 5.1; zh-CN; rv:1.9.2.12) '至于這個(gè)，其中的200是返回碼，代表是正常，當(dāng)然返回碼還有301、404、302、304等等一些，可以去查一下代表的意思。其他代表是它訪問電腦的屬性，swindows操作系統(tǒng)等等。

不知道看了這些，你暈了沒有，當(dāng)然我們一般習(xí)慣用exec表格去分析日志，將txt文件導(dǎo)入表格中，能夠幫助我們更直觀的去分析日志，知道蜘蛛在我們網(wǎng)站上抓取了哪些內(nèi)容，然后將內(nèi)容定義為什么。當(dāng)然還可以利用日志分析軟件來分析。

關(guān)于更多，也可以搜索MOON蟲博客www.croelhui.com，需要我介紹什么，歡迎大家給我留言。

申請創(chuàng)業(yè)報(bào)道，分享創(chuàng)業(yè)好點(diǎn)子。點(diǎn)擊此處，共同探討創(chuàng)業(yè)新機(jī)遇！

相關(guān)標(biāo)簽
服務(wù)器日志

相關(guān)文章

  • 如何進(jìn)行服務(wù)器日志分析

    網(wǎng)站服務(wù)器日志分析對網(wǎng)站優(yōu)化是很有好處的，網(wǎng)站服務(wù)器日志完整的記錄了蜘蛛爬蟲抓取網(wǎng)站的情況以及訪問狀態(tài)，可以通過網(wǎng)站日志來了解我們網(wǎng)站的收錄量以及流量等數(shù)據(jù)。

  • 服務(wù)器日志能夠給優(yōu)化傳遞的什么信息

    導(dǎo)讀：對于服務(wù)器日志，相信好SEO新手不是很懂，甚至都沒聽過，別說可以去看懂一個(gè)服務(wù)器日志，要想做好優(yōu)化服務(wù)器日志是非常重要的，通過服務(wù)器日志展現(xiàn)的信息，我們可以清楚的了解到營銷網(wǎng)站優(yōu)化的動(dòng)向，還有哪些地方需要修改的，總之，對于營銷網(wǎng)站的優(yōu)化有著重要的作用及意義，那么那么營銷網(wǎng)站服務(wù)器日志怎么看呢?

    標(biāo)簽：
    服務(wù)器日志

  • 服務(wù)器日志能給SEOer傳遞哪些信息？

    互聯(lián)網(wǎng)靠的就是大量的信息，做SEO優(yōu)化推廣更是離不開信息，其中最重要的信息就是服務(wù)器日志，服務(wù)器日志的存在不僅使我們這些做SEO的站長能夠看出很當(dāng)名堂，同時(shí)對網(wǎng)站的優(yōu)化有著重要的作用及意義。那么服務(wù)器日志能給SEO站長傳遞哪些有利的信息呢?服務(wù)器日志能給SEOer傳遞哪些信息?服務(wù)器日志能給SEOe

    標(biāo)簽：
    seo診斷
    服務(wù)器日志

  • 讀懂服務(wù)器日志快速超越競爭對手

    很多站長很重視網(wǎng)站后臺(tái)數(shù)據(jù)分析，分析后臺(tái)數(shù)據(jù)來微調(diào)網(wǎng)站，而往往忽視網(wǎng)站服務(wù)器日志分析，有的站長認(rèn)為服務(wù)器日志分析不重要，有的是不會(huì)分析，這是因?yàn)椴恢婪?wù)器日志分析可以提升網(wǎng)排名，今天太原seo學(xué)習(xí)網(wǎng)就來爆料讀懂服務(wù)器日志快速超越競爭對手：一、用戶訪問情況1、用戶的ip地址2、訪問時(shí)間3、用什么瀏覽

  • 實(shí)例解析如何分析服務(wù)器日志

    網(wǎng)站服務(wù)器日志分析對于一個(gè)網(wǎng)站具有比較重要的作用，通過分析該日志，我們可以知道搜索引擎爬行記錄，這有利于我們針對搜索引擎的習(xí)慣進(jìn)行交換。那么，今天我們便以SEO教程網(wǎng)為例，告訴大家怎么來分析網(wǎng)站日志吧：1，我們到哪去找服務(wù)器日志？一般我們使用的虛擬

    標(biāo)簽：
    服務(wù)器日志
加載更多

熱門排行

信息推薦