WEBサイトGooglebotは最初の2MBまでをクロールする、15MBではなかった？→Googleの一般的なクローラーは15MB上限
Googlebotは最初の2MBまでをクロールする、15MBではなかった？→Googleの一般的なクローラーは15MB上限
【2026年3月確定】Googlebotのクロール上限は2MB — 15MBとの違いを解説
2026年3月12日、GoogleのGary Illyesがポッドキャスト（Search Off the Record ep.105）で詳細を説明しました。Google内の全クローラーはデフォルト15MB制限を持つが、Google検索用のGooglebotは2MBに引き下げている。これは仕様変更ではなくドキュメントの整理です。
2MB vs 15MB — 正確な理解
- Googlebot（検索用）: 先頭2MBまで：
- HTML、CSS、JSなど、検索インデックス用に取得するファイルは先頭2MBまで。PDFは64MBまで。
- Google汎用クローラー: デフォルト15MB：
- Google内の全クローラーの共通基盤は15MB。各チームが独自にオーバーライド可能。検索チームは2MBに設定。
- 実際の影響は限定的：
- HTTP Archiveによると、HTMLファイルの中央値は約30KB。2MBに達するには平均の約67倍。一般的なサイトには影響しない。
- Spotibo実験で確認済み：
- 2MBを超えるHTMLページでテストした結果、2MB以降のコンテンツはGooglebotに無視されることを確認。
【参照情報】
- DebugBear： Googlebot's 2MB Crawl Size Limit
https://www.debugbear.com/blog/googlebot-crawler-file-size-limit - Search Engine Journal： Googlebot Crawl Limit Information
https://www.searchenginejournal.com/googlebot-crawl-limit-information/569794/
・Googlebotのクロール上限がドキュメントで「15MB」から「2MB」に明確化されたが、実際の仕様変更ではない。
・Googleのクローラーは多様で、Googlebotはその一部であり、他のクローラーには異なるサイズ上限が設定されている。
・GooglebotはHTMLファイルの最初の2MBとPDFの最初の64MBをクロール可能。
・これまでの15MB上限は誤りで、実際には2MBが正しい上限だった。
・一般的なサイトでは2MBを超えるHTMLは稀で、SEOにおいて特に問題はない。
・Googleのクローラーは多様で、Googlebotはその一部であり、他のクローラーには異なるサイズ上限が設定されている。
・GooglebotはHTMLファイルの最初の2MBとPDFの最初の64MBをクロール可能。
・これまでの15MB上限は誤りで、実際には2MBが正しい上限だった。
・一般的なサイトでは2MBを超えるHTMLは稀で、SEOにおいて特に問題はない。
この記事でこんな事が
学べそうですね
SEO
ポイント要約
Googlebotのクロール上限が2MBに変更され、PDFは64MBまで対応。クローラーの種類やファイル形式による制限を理解することが重要。
このトピックで身につけるべきスキル
- 1Googlebotのクロール上限が2MBであることを理解する。Googlebotのクロールに関する公式ドキュメント見てみるGooglebotのクロールに関する詳細な情報を学べる公式リソース
- 2PDFファイルは64MBまでクロール可能であることを知る。SEOの基本を学ぶためのUdemyコース見てみるSEOの基礎から最新のトレンドまで学べるコース
- 3異なるクローラーやフェッチャーの役割を理解する。Ahrefs AcademyのSEOコース見てみるSEOの実践的なテクニックを学べる無料リソース
- 4ファイルサイズの制限がインデックスに与える影響を学ぶ。MozのSEOガイド見てみるSEOの基本を学ぶための包括的なガイド
- 5サポートされているファイル形式についての知識を深める。GoogleのSearch Consoleの使い方見てみるSearch Consoleを活用してサイトのパフォーマンスを向上させる方法
学習の要点
重要キーワード・学習リソース
本記事の参照元
Googlebotは最初の2MBまでをクロールする、15MBではなかった？→Googleの一般的なクローラーは15MB上限
出典: 海外SEO情報ブログ
2025/05/31
THU
00:00:00
現在の貴方のIPアドレス
216.73.216.214
このサイトで書いている人
株式会社ツクルン
Webアドバイジング・クリエイター
池田南美夫
もうすぐ●●歳。ずっーと現役SE。日本にインターネットが上陸してから、ずっーと携わる。
ほんとは超アナログ人間のギター弾き、バンドマン。でも音楽活動とSE、案外似てる。