重復(fù)的內(nèi)容是兩個(gè)或多個(gè)包含相同或非常相似文本的頁面。重復(fù)的內(nèi)容會(huì)分割鏈接權(quán)限，從而削弱頁面對自然搜索結(jié)果進(jìn)行排名的能力。

假設(shè)一個(gè)網(wǎng)站有兩個(gè)相同的頁面，每個(gè)頁面都有10個(gè)外部入站鏈接。該網(wǎng)站本可以利用20個(gè)鏈接的強(qiáng)度來提高單個(gè)頁面的排名。而是，該站點(diǎn)有兩個(gè)包含10個(gè)鏈接的頁面。兩者都不會(huì)排名很高。

重復(fù)的內(nèi)容還會(huì)損害抓取預(yù)算，否則會(huì)使搜索引擎的索引膨脹。

電子商務(wù)網(wǎng)站創(chuàng)建重復(fù)的內(nèi)容。它是平臺(tái)設(shè)置和技術(shù)決策的副產(chǎn)品。以下是從搜索引擎索引中刪除重復(fù)內(nèi)容的兩種好方法  -以及避免的六種方法。

一、刪除索引重復(fù)內(nèi)容

要更正編入索引的重復(fù)內(nèi)容，（i）將鏈接權(quán)限合并到單個(gè)頁面中，以及（ii）提示搜索引擎從其索引中刪除重復(fù)的頁面。有兩種好的方法可以做到這一點(diǎn)。

（1）301重定向是最好的選擇。301重定向以合并鏈接權(quán)限，提示取消索引，還將用戶重定向到新頁面。Google已聲明，它使用301重定向?qū)?00％的鏈接權(quán)限分配給新頁面。但是必應(yīng)和其他搜索引擎的口碑更為嚴(yán)格。無論如何，僅當(dāng)頁面已被永久刪除時(shí)，才使用301重定向。

（2）規(guī)范標(biāo)簽。“規(guī)范”是一個(gè)被認(rèn)為是唯一真理的花哨詞。在搜索引擎優(yōu)化中，規(guī)范標(biāo)簽可識別應(yīng)為哪個(gè)頁面建立索引并分配鏈接權(quán)限。標(biāo)簽是對搜索引擎的建議，而不是諸如301重定向之類的命令。搜索引擎通常會(huì)使用規(guī)范標(biāo)簽來真正復(fù)制內(nèi)容。

當(dāng)（i）301重定向不切實(shí)際或（ii）重復(fù)頁面需要保持可訪問性時(shí)，例如，如果您有兩個(gè)產(chǎn)品網(wǎng)格頁面，一個(gè)從高到低排序，另一個(gè)低-至高，您不想將一個(gè)重定向到另一個(gè)。

二、避免的8種方法

根據(jù)我的經(jīng)驗(yàn)，建議不要使用某些選項(xiàng)（或聲稱要?jiǎng)h除）從搜索索引中重復(fù)的內(nèi)容。

（1）302重定向信號。表示臨時(shí)移動(dòng)而非永久移動(dòng)。多年來，Google一直說302重定向通過了100％的鏈接授權(quán)。但是，302不會(huì)提示取消索引。由于它們執(zhí)行與301相同的工作量，因此僅當(dāng)重定向確實(shí)是臨時(shí)的并且有朝一日將被刪除時(shí)，才應(yīng)使用302重定向。

Google認(rèn)為JavaScript重定向是有效的，經(jīng)過幾天或幾周才能完成渲染。但是沒有理由使用JavaScript重定向，除非您缺乏301的服務(wù)器訪問權(quán)限。

（2）網(wǎng)頁加載速度。在瀏覽器加載新頁面之前，購物者可以在屏幕上看到短暫的提示或幾秒鐘的頁面加載，從而看到元刷新。由于令人討厭的用戶體驗(yàn)以及Google需要將它們作為重定向處理的渲染時(shí)間，因此，它們是一個(gè)糟糕的選擇。

（3）404錯(cuò)誤。顯示請求的文件不在服務(wù)器上，提示搜索引擎對該頁面進(jìn)行索引刪除。但是404也會(huì)刪除頁面的關(guān)聯(lián)鏈接權(quán)限。如果可以，請嘗試301重定向已刪除的頁面。

當(dāng)服務(wù)器302將錯(cuò)誤的URL重定向到看起來像錯(cuò)誤頁面的URL時(shí)，就會(huì)出現(xiàn)軟404錯(cuò)誤，然后該錯(cuò)誤頁面將返回200 OK服務(wù)器標(biāo)頭響應(yīng)。例如，例如example.com/page/已被刪除，應(yīng)返回404錯(cuò)誤。相反，它302重定向到看起來像錯(cuò)誤頁面的頁面（例如www.example.com/error-page/），但返回200 OK響應(yīng)。

302響應(yīng)無意中告訴搜索引擎www.example.com/page/已經(jīng)消失，但可能會(huì)回來，因此該頁面應(yīng)該保持索引。此外，200響應(yīng)告訴搜索引擎www.example.com/error-page/是用于索引的有效頁面。因此，軟404不僅導(dǎo)致索引了一個(gè)錯(cuò)誤的URL，而且還導(dǎo)致了兩個(gè)錯(cuò)誤，從而使索引進(jìn)一步膨脹。

（4）搜索引擎工具。 Google和Bing提供了刪除URL的工具。但是，由于兩者都要求提交的URL返回有效的404錯(cuò)誤，因此從服務(wù)器刪除頁面后，這些工具是備份步驟。

（5）Meta robots noindex標(biāo)記  位于HTML文件的開頭。該NOINDEX屬性告訴漫游器不要對網(wǎng)頁進(jìn)行索引。在將頁面編入索引后應(yīng)用時(shí)，它最終可能導(dǎo)致取消索引，但這可能要花費(fèi)幾個(gè)月的時(shí)間。不幸的是，鏈接授權(quán)因引擎索引頁面的能力而消失。并且由于搜索引擎必須繼續(xù)爬網(wǎng)頁面以驗(yàn)證noindex屬性是否仍然存在，因此該選項(xiàng)不會(huì)減少索引的靜態(tài)頁面。（請注意，順便說一句，meta robots標(biāo)記的nofollow屬性對該頁面的索引沒有影響。）

（6）Robots.txt disallow  不會(huì)提示取消索引。被索引的頁面不允許再被搜索引擎機(jī)器人抓取，但是它們可能會(huì)或可能不會(huì)保持索引。除非通過URL搜索，否則這些頁面不太可能出現(xiàn)在搜索結(jié)果中，因?yàn)樗阉饕鎸⒉辉僮ト≡擁撁妗?/span>

雖然他們不是理想的去除索引內(nèi)容，薈萃機(jī)器人NOINDEX和的robots.txt 不允許既要防止被索引新的重復(fù)內(nèi)容。但是，其應(yīng)用要求在啟動(dòng)新站點(diǎn)之前識別重復(fù)的內(nèi)容，并且它們并不是100％有效的。

如果您需要確定的取消索引方法，最好的選擇是301重定向或404錯(cuò)誤，因?yàn)榉?wù)器不再加載該頁面上找到的內(nèi)容。如果您需要為頁面取消索引并利用鏈接權(quán)限，請使用301重定向。