使用 noindex 阻止搜索引擎編入索引
可以通過(guò)在 HTTP 響應(yīng)中包含 noindex 元標(biāo)記或標(biāo)頭，阻止網(wǎng)頁(yè)或其他資源顯示在 Google 搜索中。當(dāng) Googlebot 下次抓取該網(wǎng)頁(yè)并發(fā)現(xiàn)該標(biāo)記或標(biāo)頭時(shí)，就會(huì)完全阻止該網(wǎng)頁(yè)出現(xiàn)在 Google 搜索結(jié)果中，不論是否有其他網(wǎng)站鏈接到該網(wǎng)頁(yè)。
重要提示：為讓 noindex 指令生效，網(wǎng)頁(yè)或資源不得被 robots.txt 文件屏蔽，并且必須能被抓取工具訪問(wèn)。如果該網(wǎng)頁(yè)被 robots.txt 文件屏蔽或抓取工具無(wú)法訪問(wèn)該網(wǎng)頁(yè)，那么抓取工具將永遠(yuǎn)無(wú)法看到 noindex 指令，因此該網(wǎng)頁(yè)可能仍會(huì)顯示在搜索結(jié)果中，例如，如果有其他網(wǎng)頁(yè)鏈接到該網(wǎng)頁(yè)的情況。
如果您不具備對(duì)服務(wù)器的根訪問(wèn)權(quán)限，可借助非常實(shí)用的 noindex 控制對(duì)您網(wǎng)站中各個(gè)網(wǎng)頁(yè)的訪問(wèn)權(quán)限。
實(shí)施 noindex
實(shí)施 noindex 的方法有兩種：將其作為元標(biāo)記實(shí)施，或作為 HTTP 響應(yīng)標(biāo)頭實(shí)施。這兩種方法的效果相同，從中選擇更方便您網(wǎng)站采用并且更適合相應(yīng)內(nèi)容類型的那一種方法即可。
<meta> 標(biāo)記
若想阻止大部分搜索引擎網(wǎng)頁(yè)抓取工具將您網(wǎng)站中的某個(gè)網(wǎng)頁(yè)編入索引，請(qǐng)將以下元標(biāo)記放入該網(wǎng)頁(yè)的 <head> 部分中：
<meta name="robots" content="noindex">
若想僅阻止 Google 網(wǎng)頁(yè)抓取工具將網(wǎng)頁(yè)編入索引，請(qǐng)使用以下元標(biāo)記：
<meta name="googlebot" content="noindex">
請(qǐng)注意，某些搜索引擎網(wǎng)頁(yè)抓取工具對(duì) noindex 指令可能會(huì)有不同的解讀。因此，您的網(wǎng)頁(yè)可能仍會(huì)出現(xiàn)在其他搜索引擎的結(jié)果中。
詳細(xì)了解 noindex 元標(biāo)記。
HTTP 響應(yīng)標(biāo)頭
除了使用元標(biāo)記，您還可在響應(yīng)中返回一個(gè)值為 noindex 或 none 的 X-Robots-Tag 標(biāo)頭。響應(yīng)標(biāo)頭可用于非 Html 資源，例如 PDF、視頻文件和圖片文件。下面是一個(gè) HTTP 響應(yīng)示例，它含有一個(gè) X-Robots-Tag，用來(lái)指示抓取工具不要將某一網(wǎng)頁(yè)編入索引：
HTTP/1.1 200 OK
(…)
X-Robots-Tag: noindex
(…)
詳細(xì)了解 noindex 響應(yīng)標(biāo)頭。
幫助我們發(fā)現(xiàn)您的元標(biāo)記
我們必須抓取您的網(wǎng)頁(yè)，才能看到元標(biāo)記和 HTTP 標(biāo)頭。如果某個(gè)網(wǎng)頁(yè)仍顯示在搜索結(jié)果中，可能是因?yàn)樵谀砑訕?biāo)記后我們尚未抓取過(guò)該網(wǎng)頁(yè)。您可以使用網(wǎng)址檢查工具請(qǐng)求 Google 重新抓取您的網(wǎng)頁(yè)。此外，也可能是因?yàn)?robots.txt 文件阻止 Google 網(wǎng)頁(yè)抓取工具訪問(wèn)該網(wǎng)址，因此這些抓取工具無(wú)法發(fā)現(xiàn)此標(biāo)記。若要允許 Google 訪問(wèn)您的網(wǎng)頁(yè)，您必須修改 robots.txt 文件。您可以使用 robots.txt 測(cè)試工具修改和測(cè)試 robots.txt。
想了解更多SEO資料的內(nèi)容，請(qǐng)?jiān)L問(wèn)：SEO資料
