こんにちわ、久しぶりにブログネタ、Google Indexing APIのことです。
クローラーを呼び込むプログラム
2020年にブログを始めたころ、Googleへのインデックス速度を向上させようとIndexing APIを使っていました。
この施策はとても効果があり、書いた記事や変更した記事がすぐにGoogleに反映されるようになりました。 運営している3つのブログの全記事をプログラムで自動的に更新通知を出し、クローラーを呼び寄せていました。
Indexing API変更のニュース
たまたま見ていた𝕏のポストにこんなのを見つけました。
【2024年9月12日のSEO最新情報】
— PINTO!の中の人(SEO領域)@PLAN-B (@PINTO_PB22) 2024年9月12日
Google、Indexing APIの取り締まりを強化
Googleはドキュメントを更新し、Indexing APIがスパム検出の対象となることを明記にしました。Indexing APIとは、ページが追加または削除されたときにサイト所有者からGoogleへ通知するAPI です。
※今回の更新はIndexing…
どうやら、9月12日あたりにGoogle がIndexing APIの不正利用について、いままでよりも細かくチェックをするようにしたらしいです。公式サイトを見てみましたが、以下の一文が追加されていました。
Indexing API を通じて送信されたすべてのページは、厳格なスパム検出を受けます。複数アカウントを使用するなどの手段で使用量の割り当て上限を超えるなど、Indexing API を悪用しようとした場合、アクセス権が取り消される可能性があります。詳しくは、Google のスパムに関するポリシーをご覧ください。
https://developers.google.com/search/apis/indexing-api/v3/quickstart?hl=ja より
Google Indexing APIは、当初から「求人情報」と「ライブストリーミング動画」のページに使ってよいというルールでした。このルールが変更があったわけではありません。
ただ、対象外のページにテスト的に使ってみたら、APIがエラーにならずクローラーもやってきたという事実があり、ルールの範囲外だと認識もありながら自己開発したプログラムから更新リクエストを送るように使い続けていました。
この抜け道がふさがれたということです。
Google Indexing APIが使えなくなるわけではなく、サイトやコンテンツがスパム扱いになるということで、サイトへの流入が減る事態になります。
本来の使い方をしている場合には、今回の変更には影響がありません。
そして、クローラーが来なくなりました
Google Indexing APIの利用者として最近見つけた変化は、Google クローラーの来訪頻度の低下です。 サーチコンソールで確認できる kanaxx.hatenablog.jpのクローラーレポートを貼り付けておきました。
グラフをみて一目瞭然です。9月11日を境に大きく変わっています。
2024年9月11日のクローラーレポート
2024年9月13日のクローラーレポート
9月10日に500回以上来ていたわけですが、
9月13日には30回しかきていません。
これは明らかに変ですね。
この間、サイト側で何か作業をしたことはなく、いつもどおり1日1回、ブログの全記事をGoogle Indexing APIに投げ込んでいます。 9月13日以降も、毎日、プログラム経由でAPIを実行していますが、昔ほどクローラーが来なくなっています。
APIでクローラーを呼んでも来てくれないってことは、更新したコンテンツを見にくる必要もないと判断されている可能性が高そうですね。
このまま続けているとサイト全体がマイナス評価を受けそうなので、Indexing APIを実行するのやめました。
Indexing.today も終了します
Indexing APIの開発したときの知識を使って、Indexing APIを代理で実行するサービスを細々と運営してきました。このような事情により終了することにします。
開発時の記事
kanaxx.hatenablog.jp
特に宣伝もしなかったですが、何人かの目に留まることがあり利用してもらっていました。それももう終了します。年内にはすべてのデータを削除してサービス終了の予定です。
Wordpressのプラグインも気を付けて
WordpressのプラグインでGoogle Indexing APIを使っているケースもあります。有名どころだとInstant Indexing for Googleとかですね。
個人の判断によりますが、状況的によい方向にはいかないと思うので、お気を付けください。
