Понимание тенденций индексирования Google: качество над количеством. Узнайте, как ИИ изменил динамику Интернета и почему посредственный контент становится лишним.
Автор изображения: Lyna ™
Две тенденции повлияли на то, как Google использует индексацию. В то время как открытая сеть сокращается, Google должна сканировать такие большие контент-платформы, как YouTube, Reddit и TikTok, часто построенные на “сложных” Фреймворки JS для поиска нового содержимого. В то же время искусственный интеллект изменяет основную динамику сети, делая посредственное и плохое содержимое излишним.
В моей работе с некоторыми из крупнейших сайтов в Интернете я недавно заметил обратную связь между проиндексированными страницами и органическим трафиком. Большее количество страниц не автоматически означает плохое качество, но часто не соответствует ожиданиям Google. Или, лучшими словами, изменилось определение качества. Ставки для поисковиков высоки: расширяйте слишком агрессивно и весь ваш домен может пострадать. Нам нужно изменить наше отношение к качеству и разработать системы мониторинга, которые помогут нам понять качество домена на уровне страницы.
Насыщенный
Приблизительно с октября 2023 года Google изменил способ обработки доменов: до октября ни один пример не демонстрировал обратной связи. Кроме того, у Google возникли проблемы с индексацией, когда они запустили обновление основного алгоритма в октябре 2023 года, как это произошло сейчас во время обновления в августе 2024 года.
До изменения Google индексировал все и отдавал приоритет содержимому наивысшего качества в домене. Подумайте об этом как о копании золота, когда вы наполняете поддон гравием, грунтом и водой, а затем вращаете и перемешиваете, пока не останется только ценный материал.
Теперь домен и его содержимое должны подтвердить себя, прежде чем Google даже попытается искать золото. Если в домене слишком много низкокачественного содержимого, Google может проиндексировать только некоторые страницы или вообще не проиндексировать их в крайних случаях.
Одним из примеров является doordash.com, который добавил много страниц за последние 12 месяцев и потерял органический трафик в процессе. По крайней мере, некоторые, а может, и все новые страницы не соответствовали ожиданиям Google относительно качества.
Автор изображения: Кевин Индиг
Но почему? Что изменилось? Я размышляю так:
- Google хочет сэкономить ресурсы и средства, поскольку компания переходит в состояние операционной эффективности.
- Частичное индексирование более эффективно против низкокачественного содержимого и спама. Вместо того, чтобы индексировать и пытаться ранжировать новые страницы домена, Google наблюдает за общим качеством домена и обрабатывает новые страницы с соответствующим скептицизмом.
- Если домен постоянно создает содержание низкого качества, у него не будет шанса еще больше загрязнять индекс Google.
- Планка качества Google повысилась, поскольку в Интернете стало намного больше содержимого, а также оптимизировать свой индекс для RAG (обзоры заземления&AI) и моделей поездов.
Этот акцент на качестве домена как сигнале означает, что вы должны изменить способ мониторинга своего веб-сайта, чтобы учитывать качество. Мой руководящий принцип: Если вы не можете добавить ничего нового или лучшего в Интернет, это, вероятно, недостаточно хорошо.
Качественная пища
Качество домена – это мой термин для описания соотношения проиндексированных страниц, соответствующих стандарту качества Google’, против таковых. Обратите внимание, что качество учитывается только проиндексированными страницами. Максимальный процент “плохих” страниц до того, как Google уменьшит трафик до домена, неясно, но мы точно можем увидеть, когда он будет выполнен:
Автор изображения: Кевин Индиг
Автор изображения: Кевин Индиг
Автор изображения: Кевин Индиг
Я определяю качество домена как сигнал, состоящий из 3 областей: опыт пользователя, качество содержимого и техническое состояние:
- Взаимодействие с пользователем: находят ли пользователи то, что они ищут?
- Качество контента: прирост информации, дизайн контента, полнота
- Технически оптимизировано: дублированное содержимое, рендеринг, содержимое на странице для контекста, “просканировано, не индексировано/обнаружено”, мягкий 404s
Пример повторяющегося содержимого : Кевин Индиг)
Внезапное увеличение количества проиндексированных страниц обычно указывает на техническую проблему, например дублирование содержимого из параметров, интернационализация или неисправное разбиение страниц. В приведенном ниже примере Google немедленно уменьшил органический трафик до этого домена, когда логика разбиения на страницы нарушилась, что повлекло за собой много дублированного содержимого. Я никогда не видел, чтобы Google быстро реагировала на технические ошибки, но это новое состояние оптимизации поисковых систем, в котором мы находимся.
Автор изображения: Кевин Индиг
В других случаях всплеск количества проиндексированных страниц указывает на программную игру SEO, когда домен запускает много страниц по одному шаблону. Когда качество содержимого программируемых страниц недостаточно высокое, Google быстро перекрывает кран трафика.
Автор изображения: Кевин Индиг
Автор изображения: Кевин Индиг
В ответ Google часто уменьшает количество ключевых слов, занимающих первые 3 позиции. Количество ключевых слов, занимающих другие позиции, часто относительно стабильно.
Автор изображения: Кевин Индиг
Автор изображения: Кевин Индиг
Автор изображения: Кевин Индиг
Размер усугубляет проблему: качество домена может быть большей проблемой для больших сайтов, хотя это также может повлиять на меньшие.
Добавлять новые страницы в свой домен само по себе неплохо. Вы просто хотите быть осторожными с этим. Например, публикация новых идей лидерства или маркетингового содержимого продукта, не нацеленного непосредственно на ключевое слово, может быть очень ценной для посетителей сайта. Вот почему измерение вовлечённости и удовлетворенности пользователей в дополнение к показателям SEO является критическим.
План диеты
Важнейший способ сохранить “жир” (низкокачественные страницы) и уменьшить риск попасть под влияние обновления Core – это установить правильную систему мониторинга. Трудно улучшить то, что вы не измеряете.
В центре&60~strong>системы мониторинга качества домена это информационная панель, которая отслеживает показатели для каждой страницы и сравнивает их со средним . Если бы я мог выбрать только три показателя, я бы измерил обратный показатель отказов, конверсии (мягкие и жесткие) и щелчки + рейтинги по типу страницы на страницу по сравнению со средним значением. В идеале ваша система будет уведомлять вас о прыжке скорости сканирования, особенно для новых страниц, ранее не сканировавшихся.
Как я пишу в Как лучшие компании измеряют качество содержимого:
1/Для качества производства измеряйте такие показатели, как рейтинг редактора SEO, показатель Flesch/читабельности или # орфографических/грамматических ошибок
2/Для качества производительности измеряйте такие показатели, как # первые 3 позиции, соотношение времени на странице и ожидаемого времени чтения, обратный показатель отказов, глубину прокрутки или значение конвейера
3/Для качества сохранения измеряйте показатели производительности в течение времени и за год
Игнорируйте такие страницы, как «Условия предоставление услуг» или «О нас», во время мониторинга своего сайта, поскольку их функция не связана с SEO.
Фаза усиления
Мониторинг – это первый шаг к пониманию качества домена вашего сайта’. Вам не всегда нужно добавить больше страниц, чтобы развиваться. Часто вы можете улучшить существующий инвентарь страниц, но вам нужна система мониторинга, чтобы понять это в первую очередь.
Adidas является хорошим примером домена, который смог увеличить органический трафик, лишь оптимизировав имеющиеся страницы.
Автор изображения: Кевин Индиг
Другим примером является Redfin, который поддерживал постоянное количество страниц, значительно увеличивая органический трафик.
Автор изображения: Кевин Индиг <стр.>Цитирует старший Директор по развитию продукции в моем Redfin Deep Dive о достижении нужной планки качества:
<цитата>
Перенос нашего местного опыта на веб-сайт – будучи авторитетом на рынке жилья, отвечая на то, как это жить в определенном районе, предлагая полный набор для продажи и аренды инвентаря в Соединенных Штатах.
Поддержание технического совершенства – наш сайт велик (более 100 миллионов страниц), поэтому мы не можем спать на такие вещи, как производительность, состояние сканирования и качество данных. Иногда наименее “сексуальный” усилия могут быть наиболее эффективными.”
Такие компании, как Lending Tree или Progressive увидели значительные преимущества благодаря уменьшению количества страниц, которые не соответствуют их стандартам качества (см. снимки экрана с Deep Dives ниже) .
Progressive перенесли страницы агентов в отдельный домен, чтобы повысить качество своего основного домена. (Автор изображения: Кевин Индиг)
Вывод
Google вознаграждает остающиеся в форме сайты. В 2020 году я писал о том, что индекс Google’ может быть меньше, чем мы думаем. Размер индекса являлся целью в начале. Но сегодня важно не столько индексировать как можно больше проиндексированных страниц, а больше иметь правильные страницы. Определение “хорошо” эволюционировал. Google более требователен к тому, кого он пускает в клуб.
В той же статье я выдвинул гипотезу о том, что Google перейдет на API индексирование и позволит владельцам сайтов взять на себя ответственность за индексацию. Это не произошло, но можно сказать, что Google использует больше API для индексирования:
- Соглашение 60$/год между Google и Reddit обеспечивает одну десятую результатов поиска Google’ (предполагая, что Reddit присутствует в топ-10 почти для каждого ключевого слова).
- В электронной коммерции, где больше обычных списков отображаются выше в результатах поиска, Google больше полагается на канал продуктов в Merchant Center для индексации новых продуктов и совершенствования своего графика покупок.
- Функции SERP, такие как «Главные новости», которые являются критически важными для индустрии новостей, являются небольшими службами с собственной логикой индексирования.
Смотря дальше, большой вопрос об индексировании заключается в том, как оно изменится, когда больше пользователей будут искать через обзоры ШИ и чат-боты ШИ. Если предположить, что магистрам все еще нужно будет уметь воспроизводить страницы, техническая работа по оптимизации поисковиков остается важной, однако мотивация для индексирования изменяется от показа веб-результатов к обучающим моделям. В результате ценность страниц, не предлагающих ничего нового, будет еще ближе к нулю, чем сегодня.