Не знаю, насколько для вас это полезно, но... В англоязычной справке о том, как работает Googlebot компания добавила один абзац с указанием ограничения по размеру сканируемого файла. Теперь прописано, что робот будет сканировать первые 15 МБ содержимого html-файла или поддерживаемого текстового файла. После первых 15 МБ файла Googlebot прекращает сканирование и рассматривает для индексации только первые 15 МБ контента. 🔗 Пруф про пироги с индексированием тут: developers.google.com/search/…ooglebot