這幾天有跟朋友在討論，關(guān)于谷歌搜索引擎不收錄網(wǎng)站內(nèi)容的問(wèn)題，以及相應(yīng)的一些解決方案。那今天這篇文章就簡(jiǎn)單的梳理一下相關(guān)的邏輯，并分享一點(diǎn)我們自己的做法。

首先是怎么收錄的問(wèn)題，即要不要手動(dòng)提交申請(qǐng)收錄。

其實(shí)谷歌搜索引擎爬蟲(chóng)是會(huì)定期光顧網(wǎng)站內(nèi)容的，并且在網(wǎng)站的站點(diǎn)地圖上，有一個(gè) LastMod 字段是能夠記錄網(wǎng)站最新內(nèi)容的更新時(shí)間的。所以理論上是不需要我們?cè)賳为?dú)手動(dòng)，在谷歌站長(zhǎng)工具里面提交我們的收錄申請(qǐng)。

但是按照我們自己的經(jīng)驗(yàn)，被動(dòng)等待這種方式，最快也需要 2-3 天才能被爬蟲(chóng)發(fā)現(xiàn)并收錄，遠(yuǎn)不及主動(dòng)提交方式來(lái)得快（最快 2-3 小時(shí)）。

所以處于收錄速度與數(shù)據(jù)統(tǒng)計(jì)便利的角度出發(fā)，還是建議在內(nèi)容上線后采用手動(dòng)提交的方式，去請(qǐng)求內(nèi)容收錄。不過(guò)要注意的是，大部分谷歌站長(zhǎng)賬戶的請(qǐng)求數(shù)量是有限制的（每天 10 條左右）。

但是無(wú)論是采用主動(dòng)還是被動(dòng)的收錄方式，都會(huì)存在一個(gè)問(wèn)題，即網(wǎng)站的內(nèi)容不被谷歌搜索引擎收錄。比如下圖便是我的一個(gè)新站數(shù)據(jù)，記錄著鏈接不被收錄的原因。

像“redirect error”，“noindex”這種技術(shù)類(lèi)的問(wèn)題是很好解決的，難的就是這種“currently not indexd”問(wèn)題，根本不知道從哪里下嘴。

因?yàn)閺奈覀冋鹃L(zhǎng)的角度出發(fā)，都是采用相同手段寫(xiě)的文章，也都是相同時(shí)間段提交的內(nèi)容，但就是會(huì)存在有幾個(gè)內(nèi)容不被收錄的概率。要么是“Discovered（已經(jīng)發(fā)現(xiàn)內(nèi)容）”不被收錄，要么是“Crawled（已經(jīng)抓取內(nèi)容）”不被收錄。

其實(shí)針對(duì)這些問(wèn)題，去閱讀官方指導(dǎo)手冊(cè)，根本看不出門(mén)道來(lái)。手冊(cè)里面大多都是一個(gè)指導(dǎo)性的官話，要么內(nèi)容重復(fù)，要么內(nèi)容質(zhì)量低下。

讓我們自查自糾的話，很難下手。

那這里分享兩個(gè)我們團(tuán)隊(duì)在用的，解決這類(lèi)問(wèn)題的兩個(gè)小方法。

方法一是“等”，其實(shí)有時(shí)候那些“Discovered - currently not indexd”問(wèn)題，可能是因?yàn)榉峙浣o網(wǎng)站的爬蟲(chóng)抓取資源有限，導(dǎo)致沒(méi)有更多的爬蟲(chóng)去處理這塊內(nèi)容。

那針對(duì)這種問(wèn)題，我們可以先等幾天看看谷歌搜索引擎是不是會(huì)收錄。按照我自己的經(jīng)驗(yàn)，基本上等幾天再重新手動(dòng)提交一遍收錄，就能解決問(wèn)題。另外還可以使用內(nèi)鏈的方式去做這種內(nèi)容的收錄，邏輯就是在新內(nèi)容里加一條內(nèi)鏈了，比較簡(jiǎn)單。

但是對(duì)于“Crawled - currently not indexd”問(wèn)題，再次提交收錄基本沒(méi)用。因?yàn)閺募夹g(shù)角度出發(fā)，這個(gè)階段谷歌搜索引擎已經(jīng)抓取了你的內(nèi)容，只不過(guò)因?yàn)閮?nèi)容質(zhì)量可能存在問(wèn)題，導(dǎo)致最終沒(méi)有收錄。

所以要么你花大量精力去更改內(nèi)容，使其符合谷歌搜索引擎的標(biāo)準(zhǔn)（說(shuō)實(shí)話這個(gè)標(biāo)準(zhǔn)沒(méi)辦法量化，挺虛無(wú)縹緲的）。也正是基于此點(diǎn)，這種直接修改內(nèi)容的方式，我基本很少使用。

所以如果可以的話，考慮下修改文章的標(biāo)題并修改文章的鏈接地址信息，將那條不收錄的內(nèi)容包裝成一個(gè)“新”內(nèi)容，再去請(qǐng)求收錄，80% 的概率能通過(guò)，就是這么魔幻。

以上，一點(diǎn)關(guān)于收錄問(wèn)題的分享。