サイトマップを送信した際に「取得できません」と表示される場合

サイトマップのURLはブラウザで問題なく開かれるのに、Search Consoleでは「読み込めません」と表示される場合、結論から言うと、ファイルが表示されるという事実だけでは不十分です。Googleが実際に提出されたURLを読み込めるかどうかを個別に確認する必要があります。

「取得できません」という表示は、検索結果への掲載が終わったという意味ではありません。 これは、Googleがサイトマップファイルを正しく取得できていないことを意味する可能性が高いです。

まず、最初に提出されたURLから確認してください。

表示されるサイトマップと読み込まれるサイトマップは異なります。

サイトマップは、検索エンジンにサイトの主要なアドレスを知らせるXMLファイルです。XMLは、文章とアドレスを一定の規則に従って記述したファイル形式だと考えればよいでしょう。

検索コンソールでは、サイトマップの状態を「成功」「取得不可」「サイトマップにエラーあり」のように分類して表示します。サイトマップを送信すると、URLの特定に役立ちますが、サイトマップに含まれるすべてのURLが自動的に検索に登録される、またはインデックスされるという保証はありません。

WordPress 5.5以降は、標準でサイトマップ機能が搭載されている。別途サイトマップ機能を有効にしていなければ、デフォルトのアドレスは通常 /wp-sitemap.xml である。

サイトマップが表示されたからといって、それで全てが終わったわけではありません。

WordPressでは、送信されたURLが正しくない場合がよくあります。

問題は、コア機能、SEOプラグイン、キャッシュ、セキュリティ設定などが、それぞれ異なるサイトマップのURLを作成してしまう点にあります。

例えば、ブラウザではプラグインが作成したURLを開いているにもかかわらず、Search Consoleには以前のコアのURLを登録している可能性があります。両方のURLが画面に表示されると、さらに混乱する可能性があります。なぜなら、一つは現在使用しているファイルであり、もう一つは空のファイルか、古いURLである可能性があるからです。

Googleは、robots.txtによるブロック、誤った送信アドレス、404エラー、サーバーが利用できないことを、サイトマップを取得できない原因として案内している。robots.txtは、検索エンジンがアクセスしてよい場所と、アクセスしてはいけない場所を書き留めた案内ファイルである。

また、Search Consoleのレポートには、その画面や関連機能から送信したサイトマップのみが表示されます。robots.txtでGoogleが偶然発見したサイトマップがレポートに表示されないからといって、それが直ちに問題であるとは限りません。

URLが開いていても、それが読み込まれるとは限りません。

再提出する前に、以下の順序で確認してください。

サイトマップが存在するかどうかだけを確認しないでください。提出したURLをGoogleが、ログインなしで、ブロックされずに、正しい形式で読み取れるかどうかを確認する必要があります。

  1. 検索コンソールに登録したサイトマップのURLを、そのままコピーします。
  2. アドレスバーで開いた際に、ホームページにリダイレクトされないか確認します。
  3. ログイン画面、セキュリティ確認画面、404エラーページが表示されないかを確認します。
  4. サイトのURL/robots.txtを開き、Sitemapの後に続くURLを比較します。
  5. 該当するサイトマップをブロックする「Disallow」ルールが存在するかどうかを確認します。
  6. 検索コンソールのURL検査機能で、リアルタイムテストを実行します。
  7. サイトマップインデックスが指し示すサブXMLファイルも、それぞれ開きます。

リアルタイム検査では、クロール許可が「Yes」であること、およびページ取得が成功していることが必要です。サイトマップインデックスは、複数のサブサイトマップのリストであるため、リストが一つだけ表示されるように終わらせてはいけません。

サブアドレスのいずれか1つでも404エラー、リダイレクト、アクセス拒否、またはHTML画面が表示される場合、全体の確認が中断される可能性があります。XMLではなくHTMLが表示される場合、URLが間違っているか、サーバーが誤った応答を送信している可能性があります。

サブファイルまで確認する必要があります。

原因によって、修理の方法が異なります。

URLが問題である場合は、基準を一つに定めてください。

WordPressのコア機能のみを使用しており、個別のサイトマッププラグインがインストールされていない場合は、`/wp-sitemap.xml` から確認してください。SEOプラグインがサイトマップを提供している場合は、そのプラグインが示す実際のURLを基準とする方が良いでしょう。

重要な点は、コアアドレスとプラグインアドレスをすべて無条件で提出しないことです。現在、実際に有効になっている生成主体を一つ特定し、そのアドレスをrobots.txtとSearch Consoleで一致させる必要があります。

URLを統一してください。

アクセスが遮断された場合は、サーバーとセキュリティ設定を確認してください。

robots.txtによるアクセス制限を解除し、誤ったURLを修正し、サーバーが利用可能な状態であるかを確認する必要があります。ログインしなければ表示されないサイトマップの場合、Googleも読み取ることができません。

ブラウザで「自分のコンピューターで開かれた」と表示されることは、決定的な証拠ではありません。ブラウザとGoogleが同じ応答を受け取ると断定できないため、robots.txtと検索コンソールのリアルタイム検査の両方を参照する必要があります。

自分の画面だけを信用すると、重要な情報を見逃す可能性があります。

XML形式やサイズが問題である場合は、構造を整理します。

XMLの規則に合わない文字が含まれている場合や、サイトマップの形式や名前が正しくない場合、読み込みに失敗する可能性があります。また、URLに含まれる「&」のような文字が、XMLの規則に従って処理されていない場合も、原因となることがあります。

サイトマップが50,000件を超えるURLを含んでいたり、圧縮されていないファイルが50MBを超えていたりする場合は、複数のファイルに分割する必要があります。その場合、サイトマップインデックスを使用します。

形式とサイズも、基準に合致している必要があります。

繰り返し再提出することが解決策ではありません。

「とりあえず、もう一度提出すれば良いだろう」という考えが最も一般的です。しかし、原因が同じであれば、同じ失敗を繰り返すことになります。

Googleは、取得に失敗した後、数日間は再度試行することができます。 繰り返し失敗する場合は、そのサイトマップのURLを読み込む作業を停止する可能性があるため、まず問題を修正してから再度送信する必要があります。

まず修正し、その後提出してください。

サイトマップにURLを登録したからといって、すべての記事が検索結果に表示されるわけではありません。サイトマップは、URLの発見とクロールを支援する仕組みであり、強制的にインデックスを作成するものではありません。

直接確認する方法は無料ですが、サイトマップとサブXMLファイルを一つずつ開き、robots.txtファイルと比較する必要があるため、かなり手間がかかります。 繰り返し確認するのが負担であれば、設定されたサイトマップとrobots.txtファイルを外部サーバーで検査する、有料のクレジット制ツールを選択できますが、その費用と外部サーバーの使用を合わせて検討する必要があります。

直接確認は可能ですが、繰り返すと負担になります。

SOHO SEOにおけるサイトマップの基準とrobots.txtの管理方法。

サイトマップのアドレスが複数の場所に分散している場合や、コアとプラグインの作成主体が異なる場合、まず使用するサイトマップの基準を整理する必要があります。SOHO SEOは、サイトマップにおいて、一般的なXMLサイトマップとGoogleニュースサイトマップを有効または無効にできるため、WordPress内でどのサイトマップ機能を使用するかを管理するのに適しています。

robots.txt のサイトマップのURLやブロックルールも確認する必要がある場合は、SOHO SEO の robots.txt および llms.txt で該当ファイルを編集できます。ただし、設定を変更した後でも、Google が実際にそれを読み込んでいるかどうかは、Search Console のリアルタイム検査やサブ XML の確認によって別途検証する必要があります。

現在、私のウェブサイトで最初に行うべきこと。

WordPressのコア機能のみを使用している方は、まず基本となるURLとrobots.txtに記載されているサイトマップのURLを設定してください。SEOプラグインを使用している方は、有効になっているプラグインが提供するサイトマップのURLを基準にしてください。

URLは開くのにアクセスに失敗し続ける場合は、セキュリティ画面、ログイン要求、サーバーエラー、キャッシュに残っている誤った応答などをリアルタイムで確認してください。エラーを修正した後にのみ、再度送信してください。

  • 提出されたURLが、現在有効なサイトマップであるか。
  • ブラウザで200の応答とXMLが出力されるか?
  • robots.txt がサイトマップをブロックすることはないでしょうか。
  • サブサイトマップもすべて表示されるのか?
  • リアルタイム検査において、クロール許可とサイトマップの取得が成功したか。
  • すべての確認が完了した後に、再度提出しましたか?

結局、答えは簡単です。送信先URLを何度も再送信するのではなく、まず1つの送信先URLを確定し、アクセス方法と形式を修正する必要があります。

原因に合わせて修正する必要があります。そうしないと、再び読み込まれません。

サイトマップのエラーは、送信ボタンを何度もクリックすることとは異なり、生成主体とアクセスルールを一致させる問題です。まず、実際に使用するサイトマップを決定し、robots.txtとSearch Consoleで同じURLを確認してください。

WordPress内でサイトマップ機能とrobots.txtを同時に管理する必要がある場合、SOHO SEOがこの作業を担うことができます。設定完了後も、リアルタイム検査とサブXMLの確認という手順を経て、結果を検証します。

よくある質問

Q. ブラウザでサイトマップが開かれる場合、正常なのでしょうか?

A. 正常であると断定することはできません。robots.txtによるブロック、ログイン画面、サーバーエラーの有無を確認する必要があり、また、Search Consoleのリアルタイム検査結果も合わせて確認する必要があります。

Q. 自分のウェブサイトでは、最初に何を確認すべきでしょうか?

A. WordPressのコア機能のみを使用している場合は、通常、`/wp-sitemap.xml`と`robots.txt`に記載されているSitemapのURLを比較してください。SEOプラグインを使用している場合は、現在有効になっているプラグインが示すURLを基準とし、下位のXMLファイルとリアルタイムの検査結果も確認してください。

Q. この問題をツールを使って簡単に解決できますか? どのようなツールを使用すればよいですか?

A. サイトマップとrobots.txtを自動的にチェックするツールを使用できます。 有料またはクレジット制の場合、または外部サーバーでチェックを行う場合があるため、事前に費用とデータ処理方法を確認してください。

Q. サイトマップとrobots.txtを同じ場所で管理できますか?

A. SOHO SEOのサイトマップ機能では、一般的なXMLサイトマップとGoogleニュースサイトマップを有効または無効にすることができます。また、robots.txt & llms.txtの項目で、robots.txtファイルを編集することができます。

2つの設定を1つのプラグインで管理することは可能ですが、Googleが実際にそれらにアクセスできるかどうかを確認する機能ではありません。変更後には、Search Consoleのリアルタイム検査と、サブサイトマップの確認が必要です。

WordPress関連リンク

https://sohoseo.luxdigest.com
https://store.luxdigest.com
https://wpcm.luxdigest.com