クロール情報の変化例

以前にクロールバジェットの話をしました。クロール頻度はサイト毎に設定されており、Googlebotが頻繁にクロールしすぎてサイトに負荷がかからない範疇で設計しています。

クロールレート

ふわふわ

リニューアルで変化

各サイトにはそんなクロールレートが設定されていますが、Google側では「リニューアルをすれば自動的にGooglebotは頻繁にサイト全体を見てくれるだろう」と言っていました(この発言がジョン・ミューラー氏のTweetだったか、何かのインタビューだったか忘れてしまいました…)。で、先日実際にあるサイトでリニューアルを施した結果、しっかりとSearch Consoleのクロール情報(1日あたりのクロールされたページ数)に変化が見受けられましたので、ご紹介します。

今回リニューアルしたサイトは約10,000ページあり、リニューアルのタイミングでSSL化も行いました(当然Search Consoleのプロパティも新規で作成)。リニューアルして、いっぺんに全ページを公開したのが2017年6月8日です。その際、ファイルの移動やディレクトリ構造の改善もあったため、SSLの有無に限らずURLは半数以上が変わりました。

結果、6月8日の段階からクロールしたページ数が格段に増加しているのが分かります。

クロール情報

ふわふわ

Googleはなぜ分かるの?

ここで、ちょっとした疑問です。Googleはなぜリニューアルしたのを判断できたのでしょう。ディレクトリ構造によって半数以上のURLが変わったから?それともSSLによって全URLが変わったから?デザインUI変更によってCSSやHTMLのソースが変わったから?

恐らく全部でしょう。クロールした多数のページにおいてGoogleがFetchしたり(読み込んだり)、レンダリングしたりした内容が従来と異なったため、クロールレートのリミット(クロール上限値)が外れたのだと推察します。

ふわふわ

Search Consoleでは各項目がご破算になるも…

ちなみにSSL化に伴って新規プロパティ追加したSearch Console上では、「検索での見え方」項目も「検索トラフィック」項目も全てご破算になりますので、インデックス状況や被リンク数、内部リンク数等もある程度の期間が経過しないと検証できません。ですので、リニューアルによって大きく変化していない要素に関してはHTTP時代のプロパティで(過去内容であると理解した上で)確認した方が良いでしょう。逆に言えば、クロールの統計情報だけは過去のプロパティ内容を引き継いでくれるようです。

ふわふわ

リニューアルでクロールレートが上がったメモ

まぁ…今回は大した話では無かったのですが…リニューアルなんてそうそう無いですし…そんな中リニューアルによって本当にクロールレートが上がったので、せっかくなのでメモ程度にご紹介しました。気になる集客状況ですが…ベンチマークしている検索順位は上がったものの全体の流入数は下落しているので、これから原因を追究するところです。この辺に関しても分析結果で面白い情報になれば後日ご紹介していきたいと思います。

それにしてもリニューアルのドキドキ…たまりませんね(笑)。


関連記事

過去のインフォメーションページ運用

もう何年も前からご相談の多い「過去のインフォメーションページはそのままで良いのか?捨て方が分からない」という内容。これに関して私の意見をご紹介しておきたいと思います。実はインフォメーションページはSEOだけでなく、ユーザー訪問状況、運用管理工数等によって方法がだいぶ変わるんです。 過去のインフォメー ...(続きを読む)

「高品質」へのGoogleの取り組み

このタイミングであらためてGoogleが「高品質なコンテンツページに向けてなにをしているのか」を説明しています。目新しい情報はございませんが、一応ここでも和訳して共有しておこうかと思います。 Googleの説明内容 検索品質を担保するために、Googleでは(BERTをはじめとした)アルゴリズムの強 ...(続きを読む)

ウェブ検索からのCTRを上げる

Googleウェブ検索でクリック率を上げるためのテクニック要素を備忘録的に記載しておきます。今回はDiscoverや画像検索、ニュース検索等は含めず、またリッチリザルト化やAMP、検索順位上昇の概念も含めない、純然たるウェブ検索結果のブルーリンクとして表示される部分のみに注視して考えます。 クリック ...(続きを読む)

WebフォントとSEO

最近、5Gや表示速度、Core Web Vitals等に対する世間での意識が高まっているせいか、「Webフォントってどう思います?」というご質問をよくいただきますので、私なりの意見をご紹介しておこうかと思います。 Webフォントとは 今さらご説明も不要かと思いますが、Webサイトに表示するテキストフ ...(続きを読む)

コメントを書く

コメントは承認から反映までしばらく時間がかかる場合がございます。メールアドレスが公開されることはございません。