Google的 John Mueller 在 Reddit 上回答了一個有關常用機器人元標記以及如果它不丟失會發生什麼的問題。 穆勒的回答雖然有道理並且有記錄，但可能仍然會讓許多出版商和搜尋引擎優化人員感到驚訝。
機器人元標籤
HTML 元元素傳達元資料。 元資料是機器可讀的訊息，可以由 Googlebot 等爬蟲程式讀取。
元元素有很多種類型，例如描述元元素，但機器人元元素不同，因為它可以控制搜尋引擎爬蟲。
robots元標籤傳達的訊息稱為指令，這意味著爬蟲機器人必須遵守robots元標籤中的指令。
瀏覽機器人元資料的方向有很多，但以下元標籤與 John Mueller 回答的問題有關。
元標記 noindex，無跟隨：
<meta name="robots" content="noindex, nofollow">
上面的元標記告訴搜尋引擎爬蟲不要索引網頁內容，也不要追蹤任何連結。
最常見的元標記之一是此標記，它指示搜尋引擎對您的內容建立索引並追蹤所有連結：
<meta name="robots" content="index, follow">
雖然上面的meta標籤很常見，但是它卻有許多誤解。 有一個推理是，既然 Google 支援 nofollow，那麼它必然意味著 Google 支援 follow 指令。
我發現很多權威網站都說Google使用meta robots索引，follow meta tag。
但這實際上並不是Google使用這些指令的方式，正如約翰·穆勒在他的回答中明確指出的那樣。
省略 Meta Robots 索引標籤有什麼影響？
Reddit 的人問了以下問題：
「我對我正在開發的網站有點困惑。
所以，這就是我工作的大多數網站上的元片段的樣子：
Add A Comment