很多初學(xué)SEO的朋友都會(huì)錯(cuò)誤的認(rèn)為網(wǎng)站有多少收錄、快照時(shí)間或者外鏈的多少能衡量一個(gè)人的SEO能力、技術(shù)的高低，其實(shí)不然，網(wǎng)站收錄、外鏈多少這是做SEO的最基本保證，還有就是無論您采用什么方法操控，有好的排名、有好的流量才是硬道理。在日常的優(yōu)化進(jìn)程中，網(wǎng)站日志的分析對(duì)一個(gè)網(wǎng)站的優(yōu)化有多大的作用?現(xiàn)在又有多少朋友能精準(zhǔn)的通過日志的分析找出網(wǎng)站各階段的狀況?今天來給大家說說網(wǎng)站日志的優(yōu)化的作用有多大。
一、蜘蛛訪問網(wǎng)站的次數(shù)側(cè)面反應(yīng)權(quán)重
蜘蛛訪問網(wǎng)站的次數(shù)能側(cè)面反應(yīng)出網(wǎng)站自身的權(quán)重，一般小網(wǎng)站單個(gè)蜘蛛每天來訪的次數(shù)大概在幾十次。如果高于幾十次，那么說明通過鏈接爬行到網(wǎng)站上的次數(shù)較多，那么抓取收錄的機(jī)會(huì)就會(huì)大一些，最終對(duì)排名也是有積極的影響。如果每天來訪一兩次甚至零次，那么網(wǎng)站非常危險(xiǎn)。
二、根據(jù)蜘蛛對(duì)網(wǎng)站抓取排行做調(diào)整
在很多網(wǎng)站日志中，都能清晰的看到頁面的抓取排行，URL的抓取排行，這些排行最能直接的反應(yīng)網(wǎng)站的那些部分是最受蜘蛛歡迎的。如果出現(xiàn)了很多css或js的文件都被大量的訪問，那么頁面中這樣的鏈接就大大浪費(fèi)了權(quán)重，所以需要修改robots文件給予禁止。查看有些網(wǎng)站的日志，能明顯的看到那些被過渡抓取，那些重點(diǎn)內(nèi)容抓取的較少，這樣觀察之后就能做到心中有數(shù)，可以有的放矢。比如之前我的網(wǎng)站會(huì)莫名奇妙的多出一些抓取文件夾，而這些文件夾在網(wǎng)站中是并不存在的，所以要及時(shí)發(fā)現(xiàn)，并給予屏蔽。
三、過多404頁面能降低網(wǎng)站整體權(quán)重
最近發(fā)現(xiàn)一個(gè)現(xiàn)象，晏旭工作室的客戶網(wǎng)站或多或少的都有404錯(cuò)誤頁面，這是不可避免的現(xiàn)象。有時(shí)候是空間上本身問題，有時(shí)候是自身網(wǎng)站的設(shè)置問題，有時(shí)候是外部網(wǎng)站存在外部鏈接的問題，從日志中一旦發(fā)現(xiàn)，就應(yīng)該立刻調(diào)整。如果是抓取某個(gè)URL404特別多的話，需要在網(wǎng)站上建立這樣一個(gè)URL頁面，有效的利用，也可以修改robots文件給予屏蔽，禁止抓取。大量的404錯(cuò)誤會(huì)被蜘蛛記錄下來，對(duì)網(wǎng)站是減分印象，所以會(huì)從整體上降低網(wǎng)站的權(quán)重。
四、百度不同IP段蜘蛛代表的意思
123.125.68.* 這個(gè)蜘蛛經(jīng)常來,別的來的少,表示網(wǎng)站可能要進(jìn)入沙盒了，或被者降權(quán)。
220.181.68.* 每天這個(gè)IP 段只增不減很有可能進(jìn)沙盒或K站。
220.181.7.*、123.125.66.* 代表百度蜘蛛IP造訪，準(zhǔn)備抓取你東西。
121.14.89.* 這個(gè)ip段作為度過新站考察期。
203.208.60.* 這個(gè)ip段出現(xiàn)在新站及站點(diǎn)有不正?，F(xiàn)象后。
210.72.225.* 這個(gè)ip段不間斷巡邏各站。
125.90.88.* 廣東茂名市電信也屬于百度蜘蛛IP 主要造成成分，是新上線站較多，還有使用過站長(zhǎng)工具，或SEO綜合檢測(cè)造成的。
220.181.108.95 這個(gè)是百度抓取首頁的專用IP，如是220.181.108段的話，基本來說你的網(wǎng)站會(huì)天天隔夜快照，絕對(duì)錯(cuò)不了的，我保證。
220.181.108.92 同上98%抓取首頁，可能還會(huì)抓取其他 (不是指內(nèi)頁)220.181段屬于權(quán)重IP段此段爬過的文章或首頁基本24小時(shí)放出來。
123.125.71.106 抓取內(nèi)頁收錄的，權(quán)重較低，爬過此段的內(nèi)頁文章不會(huì)很快放出來，因不是原創(chuàng)或采集文章。
220.181.108.91 屬于綜合的，主要抓取首頁和內(nèi)頁或其他，屬于權(quán)重IP 段，爬過的文章或首頁基本24小時(shí)放出來。
220.181.108.75 重點(diǎn)抓取更新文章的內(nèi)頁達(dá)到90%，8%抓取首頁，2%其他。權(quán)重IP 段，爬過的文章或首頁基本24小時(shí)放出來。
220.181.108.86 專用抓取首頁IP 權(quán)重段，一般返回代碼是30400 代表未更新。
123.125.71.95 抓取內(nèi)頁收錄的，權(quán)重較低，爬過此段的內(nèi)頁文章不會(huì)很快放出來，因不是原創(chuàng)或采集文章。
123.125.71.97 抓取內(nèi)頁收錄的，權(quán)重較低，爬過此段的內(nèi)頁文章不會(huì)很快放出來，因不是原創(chuàng)或采集文章。
220.181.108.89 專用抓取首頁IP 權(quán)重段，一般返回代碼是30400 代表未更新。
220.181.108.94 專用抓取首頁IP 權(quán)重段，一般返回代碼是30400 代表未更新。
220.181.108.97 專用抓取首頁IP 權(quán)重段，一般返回代碼是30400 代表未更新。
220.181.108.80 專用抓取首頁IP 權(quán)重段，一般返回代碼是30400 代表未更新。
220.181.108.77 專用抓首頁IP 權(quán)重段，一般返回代碼是30400 代表未更新。
123.125.71.117 抓取內(nèi)頁收錄的，權(quán)重較低，爬過此段的內(nèi)頁文章不會(huì)很快放出來，因不是原創(chuàng)或采集文章。
