noindexチェッカー:トラフィックを失う前にnoindexのページを見つける方法
HTMLの1行で、ページはGoogleから外れます。サンクスページならまさに望みどおりですが、公開後に開発者が戻し忘れた商品ページならまったく望まない結果です。noindexチェッカーは、どのページにnoindexがあり、どこで設定され、そもそもGoogleがそれを見られるのかを教えてくれます。
noindexチェッカーがすること
noindexチェッカーはURLを取得し、HTML内のmeta robotsタグとHTTPレスポンスヘッダーのX-Robots-Tagの2か所を読みます。どちらかにnoindexやnoneがあるか、そしてどのクローラー向けかを報告します。
1つのURLを確認すれば、簡単な疑問には答えられます。クロールの全URLを確認すれば、本当に役立つ疑問に答えられます。上位表示させたいはずのページのどれにnoindexがあるか、どのnoindexのページがまだXMLサイトマップにあるか、robots.txtでブロックされてGoogleが読めないのはどれか、です。
noindexを設定する2つの方法
Googleのnoindexでインデックス登録をブロックするページによると、どちらの方法も効果は同じです。ファイルの種類に合うほうを選びましょう。
| 方法 | 記述場所 | 使える対象 | 確認場所 |
|---|---|---|---|
| meta robotsタグ | HTMLのhead | HTMLページ | ページのソース |
| X-Robots-Tagヘッダー | HTTPの応答 | すべてのファイル、PDF、画像 | レスポンスヘッダー |
| robots.txtのnoindex行 | robots.txt | – サポートされていない | Googleは無視する |
<!-- in the <head> -->
<meta name="robots" content="noindex">
# as an HTTP response header
X-Robots-Tag: noindex
ルールを1つのクローラーに向けるには、robotsをgooglebotなどのクローラー名に置き換えます。すべての値はSEO ProCheckのmeta robotsとX-Robots-Tagのリファレンスにあります。
robotsディレクティブ一覧
Googleがrobots metaタグの仕様で文書化している値と、それぞれの働きです:
| ディレクティブ | 影響 | よくある用途 |
|---|---|---|
noindex | 検索結果に表示されない | サンクスページ、サイト内検索 |
nofollow | ページ内のリンクをたどらない | 信頼できないユーザーのページ |
なし | noindexとnofollow | 正しい選択であることはまれ |
nosnippet | テキストのスニペットなし | 有料記事や法的な文章 |
max-snippet:[n] | スニペットをn文字まで | 短いスニペット |
unavailable_after:[date] | 指定日以降に除外 | イベント、キャンペーン |
index, follow | 初期値、効果なし | 省略してよい |
2つのディレクティブが矛盾する場合、Googleはより制限の強いほうを適用します。HTMLにindex、ヘッダーにnoindexがあるページは、結果的にインデックスされません。
意図しないページを隠してしまうnoindexの間違い
| 間違い | 影響 | 修正 |
|---|---|---|
| ステージングのnoindexを公開時に残す | サイト全体が検索結果から消える | 削除して再クロール |
| noindexとrobots.txtのDisallow | noindexが読まれない | クロールを許可する |
| JavaScriptでnoindexを削除 | Googleがレンダリングを省くことがある | 最終的なタグを配信する |
| XMLサイトマップにnoindexのURL | シグナルが混乱する | サイトマップから外す |
| canonicalとnoindex | 矛盾するシグナル | どちらか1つにする |
| headの外にあるmeta robots | タグが無視されることがある | headの中に移す |
| ヘッダーとHTMLが食い違う | 厳しいほうが優先される | 設定元を1つにする |
| hreflangがnoindexを指す | 言語のセットが壊れる | インデックス可能なURLを指す |
最も多い想定外は2行目です。Googleによると、robots.txtでページをブロックするとクローラーはnoindexのルールを見ることがなく、URLはリンクだけを根拠に検索結果に表示されることがあります。3行目はGoogleのJavaScript SEOの基本によるものです。元のHTMLにnoindexがあると、Googleはレンダリングを省くことがあるため、後でそれを削除するスクリプトは実行されないかもしれません。クロールの側面はrobots.txtテスターのガイドで扱っています。
noindexにかかる時間と、より速い方法
Googleは、ページをクロールしてnoindexを読んだ時点でそのページを除外します。それは次にいつクロールされるかにより、Googleは一部のページでは数か月かかることがあるとしています。目的に合わせて手段を選びましょう:
| 目的 | 使うもの | 速さ |
|---|---|---|
| 今すぐ検索結果から消す | 削除ツール、その後にnoindex | 最速 |
| 検索結果から完全に消す | noindex、404、410 | 次のクロール |
| クロール済みだがインデックス未登録 | noindex | 次のクロール |
| まったくクロールされない | robots.txtのDisallow | 次にrobots.txtを取得したとき |
| 検索結果に戻す | noindexを削除し、インデックス登録をリクエスト | 数日から数週間 |
削除ツールはURLを約6か月非表示にするだけなので、その後ろにnoindex、404、410が引き続き必要です。重要なページをいくつか直したら、URL検査の「インデックス登録をリクエスト」を使いましょう。
noindexを手作業で確認する方法
1つのURLなら、両方の場所を確認します。まずヘッダー、次にHTMLです:
curl -sI https://example.com/page | grep -i x-robots-tag
curl -s https://example.com/page | grep -io '<meta[^>]*robots[^>]*>'
次に、Googleが何を見たかを確認します。Search ConsoleのURL検査では、Googlebotが受け取ったHTMLを確認でき、ページのインデックス登録レポートには「noindex」タグによって除外されましたとして除外されたすべてのページが一覧表示されます。リリースのたびにこのリストを確認しましょう。検索に表示させたいページが載っていてはいけません。
手作業での確認には2つの落とし穴があります。サイトがクローラーのユーザーエージェントにはブラウザと違う応答を返すことがあり、JavaScriptが追加するタグはレンダリング後のHTMLにしか現れず、curlでは見えません。生のHTMLとレンダリング後のHTMLの両方を取得するクローラーなら、どちらも確認できます。
サイト全体のnoindexをチェックする
- サイトをクロールします。トップページから始め、サイトがJavaScriptに依存しているならJavaScriptレンダリングをオンにします。
- インデックス不可のページを理由別にすべて一覧にします:noindex、別URLへのcanonical、エラーステータス、ブロック。
- noindexのページをテンプレートごとに並べます。noindexのテンプレートが1つあるだけで、数百ページが一度に隠れることがあります。
- XMLサイトマップと比べます。掲載されているURLはすべてインデックス可能であるべきです。2026年10月17日の自社のseoprocheck.comのクロールでは、サイトマップには1,835件のURLがある一方、200を返すHTMLページは4,561件ありました。だからこそ、2つのリストを突き合わせる必要があります。
- Search Consoleのクリック数を結びつけます。noindexなのにまだクリックがあるページは最近まで上位表示されていたということで、間違いの兆候であることが多いです。
- リリースのたびにクロールし直して比べ、新しいnoindexが公開されたその日に見つかるようにします。
ページがインデックスされないほかの理由はインデックス可否チェッカーのガイドで、サイトマップの側面はXMLサイトマップチェッカーのガイドで扱っています。
Neovaでnoindexのページを見つける
NeovaはすべてのURLをインデックス可能かインデックス不可かに分け、その理由を示します。ステータス200、noindexなし、自己参照またはなしのcanonicalです。すべてのURLのディレクティブの列セットでは、全URLのrobotsディレクティブを表示し、noindexとnofollowで絞り込めます。移行とステージングでは、ステージングのクロールを本番と、noindexも含めて比べるので、ステージングのnoindexが気づかれないまま公開されることはありません。

主なチェック項目:
- noindexディレクティブがあるとnoindexとnofollowのディレクティブがある
- noindexがHTMLとHTTPヘッダーで異なるとnoindexが複数回宣言されている
- noindexディレクティブがJavaScriptで削除される
- meta robotsタグがheadの外にある
- noindexのURLがXMLサイトマップに記載されている
- 別URLにcanonical指定されたURLがnoindexとcanonicalがnoindexのURLを指している
- 内部リダイレクトがnoindexのURLで終わるとhreflangがnoindexのURLを指している
- URLがnoindexのHTMLページからしかリンクされていない
- noindexのURLがSearch Consoleでクリックを獲得している:Search Consoleを接続した場合
- unavailable_afterの日付が過ぎている、または無効
Freeプランでは、Mac、Windows、Linuxで、すべてのチェック項目つきで1回のクロールにつき1,000 URLまでクロールできます。Neovaをダウンロードするか、機能をご覧ください。
よくある質問
ページがnoindexかどうかはどう確認しますか?
ページのソースにnoindexを含むmeta robotsタグがないか、HTTPレスポンスにX-Robots-Tagヘッダーがないかを探します。Search ConsoleのURL検査では、Googlebotが見たものがわかります。サイト全体ならクロールし、インデックス不可のページを理由別に絞り込みます。
robots.txtでブロックされたページでもnoindexは効きますか?
いいえ。noindexを読むには、Googleがページをクロールする必要があります。robots.txtでブロックされているとGoogleはルールを見ることがなく、URLはリンクを根拠に検索結果に表示されることがあります。ページが検索結果から消えるまではクロールを許可しましょう。
robots.txtのnoindexはサポートされていますか?
Googleではサポートされていません。Googleは2019年にrobots.txtのnoindex行のサポートを終了しました。代わりにmeta robotsタグかX-Robots-Tagヘッダーを使いましょう。
noindexのページがGoogleから消えるまでどのくらいかかりますか?
Googleがページを再びクロールするまでです。よくクロールされるページなら数日、めったにクロールされないページなら数か月かかることがあります。急ぐ場合は削除ツールを使えば、noindexが効くまでの約6か月、URLを非表示にできます。
noindexのページをXMLサイトマップに入れるべきですか?
いいえ。サイトマップにはインデックスさせたいページを載せるべきです。noindexのURLを入れると矛盾したシグナルになります。