Googlebot 2MBクロール制限の全貌: 影響範囲と実務対策を徹底解説

Googlebot 2MB制限とは

Googleが公式ドキュメントを更新し、Googlebotが読み取るHTMLの上限を「最初の2MB」と明記しました。これまで広く知られていた15MBという上限は一般的なクローラー全体の制限であり、Googlebot固有の制限は2MBだったことが判明しました。

この変更は新しいルールの導入ではなく、既存の仕様を正確に文書化したものです。しかし多くのSEO担当者が15MB前提で運用していたため、実務上は新たな対応が必要になるケースがあります。

一般的なWebページのHTMLサイズは100KB〜500KB程度であり、大半のサイトには影響がありません。しかし以下のようなページは2MBを超える可能性があります。

まず自サイトの主要ページがどの程度のHTMLサイズか把握することが重要です。以下の方法で簡単に計測できます。

HTMLサイズが2MBに近い場合、以下の最適化を検討してください。重要なコンテンツをHTML上部に配置することが最も効果的です。

2MB制限はレンダリング後のDOMサイズですか？

いいえ、Googlebotが取得するHTTPレスポンスの最初の2MBです。サーバーサイドレンダリング（SSR）の場合は最終HTMLサイズ、クライアントサイドレンダリング（CSR）の場合はGooglebotがJavaScriptをレンダリングした後の結果が対象になります。

圧縮（gzip/brotli）後のサイズですか？

展開後のサイズです。gzipやbrotliで圧縮された状態で転送されても、Googlebotは展開後のHTMLで2MBを判定します。

2MBを超えた部分はどうなりますか？

2MBを超えた部分のHTMLはGooglebotに認識されません。そこに含まれるコンテンツやリンクはインデックス対象外になる可能性があります。特に重要な内部リンクが2MB以降に配置されていると、リンクジュースの伝達にも影響します。