熟悉搜索引擎工作原理的都知道，索引頁(yè)面是排名的必要條件，你的頁(yè)面只有被搜索引擎索引以后，才有可能進(jìn)一步參與排名。在搜索引擎索引的過(guò)程中會(huì)遇到很多問題，本篇文章將以Google為例，介紹搜索引擎索引的相關(guān)問題及解決方法。文章較長(zhǎng)，建議收藏一下。
背景
?
本文主要是基于已經(jīng)添加GSC驗(yàn)證的網(wǎng)站的“編制索引”板塊的相關(guān)索引問題進(jìn)行展開。
? ?如上圖，在我們查看GSC的“網(wǎng)頁(yè)”板塊時(shí)，會(huì)發(fā)現(xiàn)很多網(wǎng)頁(yè)未被編入索引的原因，這些原因以表格的形式展示，當(dāng)你點(diǎn)擊某個(gè)原因時(shí)，會(huì)跳轉(zhuǎn)到相關(guān)問題url列表。我們首先要說(shuō)一下，這里只是列出了我們頁(yè)面未被索引的原因，并不是說(shuō)我們要處理列表里的所有原因，例如：1，已經(jīng)處理過(guò)，但是Google還沒來(lái)得及再次索引的頁(yè)面；2，根據(jù)網(wǎng)站或者公司發(fā)展，經(jīng)過(guò)技術(shù)特意排除索引的頁(yè)面；3，由于安裝某些插件而產(chǎn)生的Noindex頁(yè)面，而這些頁(yè)面是否index不是基于設(shè)置，而是基于其他原因的；以上這些問題實(shí)際上已經(jīng)不是技術(shù)SEO所涉及的范疇，我們需要做的只能是按部就班的工作以及等待。此外，原因列表里的“來(lái)源”字段標(biāo)記了產(chǎn)生問題的來(lái)源，作為技術(shù)，我們主要需要解決的是“網(wǎng)站”來(lái)源導(dǎo)致的noindex問題。下面我們開始一個(gè)個(gè)講解各個(gè)問題及解決方法，如果大家想找特定問題的解決方法，可以快速滑到相關(guān)問題。被“noindex”標(biāo)記排除了
?
如果你的“網(wǎng)頁(yè)未被索引的原因”類別里有這個(gè)條目，那么谷歌會(huì)給你提供一個(gè)幫助文檔指導(dǎo)你如何操作。如下圖，點(diǎn)擊“了解詳情”可以查看谷歌幫助文檔。
? ?另外，GSC為每個(gè)url提供了測(cè)試的入口，以及不被編入索引的原因。你可以在位于GSC上方的網(wǎng)址檢查里直接輸入網(wǎng)址進(jìn)行查看，如下圖，也可以點(diǎn)擊示例列表里的單個(gè)url，點(diǎn)擊“檢查網(wǎng)址”就會(huì)出現(xiàn)如下圖結(jié)果，一旦你確定了問題原因并付諸解決，就可以點(diǎn)擊“驗(yàn)證修正情況”進(jìn)行驗(yàn)證。事實(shí)上，出現(xiàn)noindex標(biāo)記的原因有很多，谷歌幫助文檔里只是指導(dǎo)我們找到了頁(yè)面的noindex標(biāo)記，但需要我們進(jìn)一步去查驗(yàn)具體原因。包括：1，公司出于某種特定原因故意noindex掉的，這種是不需要我們處理的；2，由于插件的使用不當(dāng)而產(chǎn)生的，這里就需要你去尋蹤，看到底是哪里設(shè)置的問題；3，Robots.txt的錯(cuò)誤配置使得頁(yè)面被noindex掉，檢查robots.txt頁(yè)面進(jìn)行修正；4，JS實(shí)施不當(dāng)，檢查JS文件 ? ?未找到 (404)
?
404頁(yè)面通常是由于之前的頁(yè)面被刪除而產(chǎn)生的，但也可能是你建站時(shí)存在的url設(shè)置或者拼寫錯(cuò)誤，還有可能是用戶在訪問時(shí)產(chǎn)生的錯(cuò)誤url導(dǎo)致的。如下圖，我們可以去谷歌文檔查看原因。1，對(duì)于刪除頁(yè)面而產(chǎn)生的404頁(yè)面，需要我們?nèi)ゲ檎乙幌率欠裼衼?lái)到這個(gè)頁(yè)面的內(nèi)鏈和外鏈，如果有的話，可以修改這些鏈接到新頁(yè)面，或者將404頁(yè)面做301跳轉(zhuǎn)；2，如果是url設(shè)置或者拼寫錯(cuò)誤的原因，需要找到具體的頁(yè)面，進(jìn)行修改；3，對(duì)于用戶訪問時(shí)產(chǎn)生的404頁(yè)面，建議在建站時(shí)盡量制作一個(gè)用戶友好的頁(yè)面，使這些用戶可以去到想去的頁(yè)面，而不是流失掉。服務(wù)器錯(cuò)誤 (5xx)
?
HTTP 500錯(cuò)誤很多時(shí)候是服務(wù)器有問題，而不是網(wǎng)站、網(wǎng)絡(luò)等有問題，這種情況下，你需要和服務(wù)商聯(lián)系詢問某個(gè)時(shí)段的網(wǎng)絡(luò)情況。你可以點(diǎn)擊url列表里的某個(gè)url，進(jìn)行“檢查網(wǎng)址”查看上次抓取時(shí)間，如下圖，??你需要詢問谷歌抓取時(shí)間的前后幾分鐘是否出現(xiàn)過(guò)服務(wù)器問題。另外，并不是所有500錯(cuò)誤頁(yè)面都是由于服務(wù)器問題產(chǎn)生的，以下幾個(gè)原因也可能網(wǎng)頁(yè)導(dǎo)致500錯(cuò)誤：1，.htaccess文件損壞或者某些特定配置也會(huì)導(dǎo)致網(wǎng)頁(yè)訪問發(fā)生500錯(cuò)誤；2，權(quán)限問題，有可能網(wǎng)站管理員設(shè)置了頁(yè)面訪問權(quán)限，你被排除在外；3，PHP響應(yīng)超時(shí)，數(shù)據(jù)庫(kù)無(wú)法正常連接，導(dǎo)致500錯(cuò)誤頁(yè)面產(chǎn)生；4，如果你使用的是Wordpress這類的CMS系統(tǒng)，也可能是你的主題或者插件出了問題，可以嘗試更換升級(jí)主題或者停用插件來(lái)解決這個(gè)問題；5，網(wǎng)站流量高并發(fā)，流量高峰期服務(wù)器無(wú)法即時(shí)響應(yīng)也會(huì)導(dǎo)致500錯(cuò)誤，這時(shí)就需要你考慮擴(kuò)容升級(jí)服務(wù)器，或者更換服務(wù)器了。 ? ?
網(wǎng)頁(yè)會(huì)自動(dòng)重定向和備用網(wǎng)頁(yè)（有適當(dāng)?shù)囊?guī)范標(biāo)記）
?
“網(wǎng)頁(yè)會(huì)自動(dòng)重定向”和“備用網(wǎng)頁(yè)”這兩個(gè)導(dǎo)致未被索引的原因我歸到了一類中，是因?yàn)槿绻沁@兩種原因?qū)е碌牟槐凰饕?，你只需要查看是否有聲明?guī)范網(wǎng)址，如果谷歌給你的結(jié)果是已經(jīng)有規(guī)范網(wǎng)址。并且“檢查”已經(jīng)收錄規(guī)范網(wǎng)址，那么這里就不需要對(duì)網(wǎng)站本身進(jìn)行修改了。比如我這里的url有規(guī)范網(wǎng)址，并且“檢查”顯示已經(jīng)編入索引，那么就可以了。另外， 要記得定期檢查是否有重復(fù)頁(yè)面，如果存在重復(fù)頁(yè)面，一定要做好規(guī)范化，以防時(shí)間太久，出現(xiàn)太多相似頁(yè)面導(dǎo)致關(guān)鍵詞蠶食以及無(wú)法做好權(quán)重分配和集中。這里需要說(shuō)一下備用網(wǎng)頁(yè)和重復(fù)網(wǎng)頁(yè)的區(qū)別： ? ?如果谷歌發(fā)現(xiàn)同一個(gè)網(wǎng)站上有多個(gè)網(wǎng)址顯示的內(nèi)容基本相同，就會(huì)將這些網(wǎng)址視為重復(fù)內(nèi)容，比如一些toC站通過(guò)不同的篩選方式會(huì)出現(xiàn)相同結(jié)果列表的頁(yè)面，這些頁(yè)面就屬于重復(fù)頁(yè)面。對(duì)于這些重復(fù)頁(yè)面，你需要設(shè)置規(guī)范網(wǎng)址，非規(guī)范網(wǎng)址一般不會(huì)參與排名，除非這個(gè)非規(guī)范頁(yè)面是備用頁(yè)面。當(dāng)谷歌發(fā)現(xiàn)某個(gè)頁(yè)面適配特定設(shè)備（比如手機(jī)等移動(dòng)設(shè)備）時(shí)，或者被標(biāo)記為同一網(wǎng)頁(yè)的其他語(yǔ)言版本的類似網(wǎng)址時(shí)，可能會(huì)將這些網(wǎng)址標(biāo)記為針對(duì)相應(yīng)設(shè)備類型或語(yǔ)言的備用網(wǎng)址。系統(tǒng)會(huì)根據(jù)用戶使用的語(yǔ)言或設(shè)備視情況提供備用網(wǎng)址。當(dāng)然，備用網(wǎng)址也可以進(jìn)行標(biāo)記。備用網(wǎng)址是重復(fù)網(wǎng)址的一部分。軟404
?
不同于404頁(yè)面直接返回404狀態(tài)碼，軟404雖然向用戶返回的頁(yè)面顯示是“不存在”，但是返回的狀態(tài)碼是200狀態(tài)碼，這種情況下，軟404頁(yè)面實(shí)際上向用戶展示的是一個(gè)空頁(yè)面。之前有轉(zhuǎn)載過(guò)SEOTEA的一篇軟404文章，介紹比較全面，不懂的可以點(diǎn)擊這里查看。導(dǎo)致Google索引結(jié)果顯示軟404的原因有很多，包括3，網(wǎng)站搜索結(jié)果為空產(chǎn)生的空頁(yè)面5，網(wǎng)站中途修改，某些頁(yè)面模板丟失或者刪除雖然頁(yè)面返回的是200狀態(tài)碼，但這類型頁(yè)面實(shí)際上單薄而無(wú)物，是我們需要修正的頁(yè)面。1，如果網(wǎng)頁(yè)和內(nèi)容都不存在了，可以直接返回404 not found；2，如果網(wǎng)頁(yè)和內(nèi)容已經(jīng)移到別處，可以301重定向到該頁(yè)面；3，如果網(wǎng)頁(yè)和內(nèi)容依然存在，那就需要你通過(guò)網(wǎng)址檢查工具進(jìn)一步查看頁(yè)面內(nèi)容和返回碼。如果存在大量的無(wú)法加載的資源，比如圖片、視頻、JS等非文本內(nèi)容，要盡量對(duì)這些資源進(jìn)行優(yōu)化，或者替換。已發(fā)現(xiàn) - 尚未編入索引? ?
如果你的網(wǎng)站較新，會(huì)存在很多這類頁(yè)面，不要著急，可以多做一些外鏈吸引谷歌機(jī)器人加快抓取。如下圖，谷歌也提供了幫助文檔幫你了解谷歌正在積極的抓取你的頁(yè)面。已抓取 - 尚未編入索引
?
Google 已抓取相應(yīng)網(wǎng)頁(yè)，但尚未將其編入索引。日后，該網(wǎng)頁(yè)可能會(huì)被編入索引，也可能不會(huì)被編入索引；無(wú)論如何，您都無(wú)需重新提交該網(wǎng)址以供抓取。 ? ?對(duì)于已抓取但遲遲未被索引的頁(yè)面，要考慮是否內(nèi)容過(guò)于單薄，可以嘗試優(yōu)化內(nèi)容獲取索引。谷歌對(duì)于頁(yè)面不索引有很多原因，并不至于以上原因，可以查看谷歌幫助文檔的“網(wǎng)頁(yè)索引編制”報(bào)告查看更多解決方法。文末附相關(guān)文檔鏈接。使用工具促進(jìn)索引
?
如果你嘗試了所有這些導(dǎo)致頁(yè)面不索引原因的解決方式之后，還是無(wú)法解決你的索引問題，可以嘗試使用一些促進(jìn)索引的工具。GSC網(wǎng)址檢查結(jié)果里有一個(gè)“請(qǐng)求編入索引”按鈕，如果你已經(jīng)對(duì)不索引的頁(yè)面進(jìn)行了修改，可以手動(dòng)請(qǐng)求編入索引。但需要注意，手動(dòng)請(qǐng)求的次數(shù)有限制，多次請(qǐng)求相同的網(wǎng)址也不會(huì)為此開綠燈，而且不是說(shuō)你請(qǐng)求了就會(huì)被索引，需要耐心等待。此外，谷歌也強(qiáng)調(diào)只有高質(zhì)量有用的內(nèi)容才會(huì)被索引。? ??如果你修改了大量了問題，可以在GSC中提交站點(diǎn)地圖。如果你的網(wǎng)站缺少站點(diǎn)地圖，是時(shí)候創(chuàng)建一個(gè)并提交了。Tag Parrota是一款加快谷歌索引的網(wǎng)絡(luò)工具，你只要連接GSC設(shè)置好，就可以一鍵自動(dòng)索引，不過(guò)需要付費(fèi)，網(wǎng)站上有價(jià)格表，大家可以參考，網(wǎng)址我放文末了。對(duì)于新站，這樣的工具會(huì)有一定的幫助，但對(duì)于老站，就需要我們考慮是否值得。這里需要提一句，谷歌索引并不代表參與排名，更不代表會(huì)有好的排名，谷歌索引只是表示你的頁(yè)面有參與排名的機(jī)會(huì)。所以，是否需要花錢促進(jìn)索引是你需要考慮的問題。從社媒，Google Ads等平臺(tái)來(lái)引流，以及發(fā)布外鏈，來(lái)增加網(wǎng)站互動(dòng)，將會(huì)促進(jìn)網(wǎng)站被收錄的速度。 ? ?最后
?
網(wǎng)頁(yè)被索引不是我們建立網(wǎng)站的最終目標(biāo)，而是第一步，盡量積極的解決索引問題才能讓我們的網(wǎng)站更健康。谷歌幫助文檔的“網(wǎng)頁(yè)索引編制”報(bào)告https://support.google.com/webmasters/answer/7440203#crawledhttps://tagparrot.com/pricing
文章為作者獨(dú)立觀點(diǎn)，不代表DLZ123立場(chǎng)。如有侵權(quán),請(qǐng)聯(lián)系我們。( 版權(quán)為作者所有，如需轉(zhuǎn)載，請(qǐng)聯(lián)系作者 )
網(wǎng)站運(yùn)營(yíng)至今，離不開小伙伴們的支持。 為了給小伙伴們提供一個(gè)互相交流的平臺(tái)和資源的對(duì)接，特地開通了獨(dú)立站交流群。
群里有不少運(yùn)營(yíng)大神，不時(shí)會(huì)分享一些運(yùn)營(yíng)技巧，更有一些資源收藏愛好者不時(shí)分享一些優(yōu)質(zhì)的學(xué)習(xí)資料。
現(xiàn)在可以掃碼進(jìn)群，備注【加群】。 ( 群完全免費(fèi)，不廣告不賣課！)
