Проблемы с индексацией на вашем сайте? Узнайте, почему некоторые страницы могут не быть проиндексированы и как решить типовые проблемы с индексацией.
Сегодня вопрос по поисковой оптимизации поступил от Мандипа, который испытывает проблемы с индексацией своего сайта.
Мандип спрашивает:
“Мы переработали веб-сайт и добавили несколько новых страниц. Некоторые страницы были успешно проиндексированы, а некоторые нет.
Я несколько раз пробовал в Google, но это не сработало. Теперь, пока я отправляю URL-адрес для индексирования, он показывает эту ошибку через Google Search Console: обнаружен – пока не индексировано […]
Я пробовал все, но ничего не работает. Пожалуйста, помогите мне решить эту проблему.”
Это предупреждение поступает из “Страниц” раздел “Индексирование” отчет в Google Search Console. Этот отчет дает пользователям представление о том, какие страницы просканировал и проиндексировал Google, а также о проблемах, с которыми он мог столкнуться при этом.
В отчете будут представлены детали страниц, которые были успешно просканированы и проиндексированы. Он также перечисляет причины, почему страницы сайта не были проиндексированы.
Есть ли проблема, если страница не проиндексирована?
Большинство сайтов имеют страницы, которые не проиндексированы. Часто это происходит по просьбе владельца веб-сайта.
Например, страница может быть преднамеренно исключена из индексов поисковой системы с помощью HTML “noindex” на странице или, возможно, его сканирование заблокировано в файле robots.txt.
URL-адреса, преднамеренно исключенные из индексации, будут отображаться в этом отчете, а также страницы с проблемными проблемами индексации.
В целом сканирование и индексация новой страницы на сайте может занять некоторое время. Новая страница требует времени, чтобы появиться среди “индексированных” страниц в отчете не всегда являются признаком проблемы.
Не каждая причина в “Почему страницы’не индексируются” отчет нужно рассмотреть.
Проблемы индексирования
Google не будет сканировать и индексировать каждый найденный URL. Ваша главная забота как менеджера сайта состоит в том, чтобы страницы, которые вы хотите, чтобы они были доступны как результат поиска, были проиндексированы.
По сути, если они не проиндексированы, они не смогут быть результатом поиска.
Есть несколько причин в “почему страницы’не индексируются” сообщите, что doпредложить проблему на сайте, которую следует исследовать. Например, “Ошибка сервера (500)” и “Soft 404.”
Эти метки не обязательно могут быть проблемой для отдельных URL, если они не являются теми, которые вы хотите проиндексировать, но они могут указывать на более широкую проблему с сайтом.
Что “обнаружено – Пока не проиндексировано”?
“Обнаружено – пока не индексирован” это ошибка, которую Google обозначает для URL-адресов, о которых он знает, но не проиндексировал.
Важно помнить, что URL-адреса не будут отображаться в этом сегменте, если они могут поместиться в другой в отчете.
Например, технически страница с тегом noindex может быть обнаружена Google и не проиндексирована, но она появится в поле “Выключена ‘noindex’ тег” ведро, поэтому страницы в пределах “Обнаружены – пока не индексирован” ведро есть по другой причине.
Пояснение, которое Google дает для URL-адреса, который отображается как “Обнаружено – пока не индексирован” равна:
<цитата>
“Страница была найдена Google, но еще не просканирована. Как правило, Google хотел просканировать URL, но ожидалось, что это перегрузит сайт; поэтому Google перенес сканирование. Вот почему дата последнего сканирования в отчете пуста.
Google пытается заставить своих ботов добросовестно сканировать.
То есть, поскольку Googlebot не является единственным посетителем сайта, а, возможно, одним из многих сканирующих роботов он’не желает разрушать сайт, посылая слишком много “запросов& rdquo ; на сервер.
Что может быть причиной обнаружения URL &nd;ndash; Пока не проиндексировано”?
Существует две основные причины, почему страница известна Google, но не проиндексирована. Джон Мюллер предоставил подробности об этом в 2023 году.
По сути, наряду с беспокойством о способности сервера выдерживать сканирование, также учитывается качество страницы.
Теперь, если страница не была просканирована, как Google может знать ее качество? Ну, он не может&r;rsquo;. Что он может делать, так это делать предположения на основе качества страниц на других сайтах.
Это’правильно – тонкие, повторяющиеся, малоценные страницы в другом месте вашего веб-сайта могут повлиять на индексацию ваших основных страниц.
Как решить проблему
Нет быстрого способа переместить страницу с “Обнаруженных – пока не индексирован” к “Индексировано,” но есть несколько решений, которые вы можете попробовать.
Проверить, действительно ли страница проиндексирована
Первой целью является определение того, является ли отчет Google Search Console точным и актуальным.
В верхнем правом углу отчета вы увидите “Последнее обновление” дата. Это дает вам представление о том, может ли отчет быть устаревшим.
Далее перейдите к Google и выполните site:[ваш веб-сайт] inurl:[URL-адрес страницы, которую вы хотите проиндексировать] поиск .
Если страница возвращается как результат поиска, вы знаете, что она действительно проиндексирована.
Дайте отчету некоторое время обновиться, и он начнет отображаться в разделе “Индексировано” а не в разделе “Обнаружено – пока не индексирован” отчет.
Проверьте качество страницы своего сайта
Далее вы можете рассмотреть общее качество вашего веб-сайта, поскольку это может быть причиной, почему Google не индексирует вашу страницу.
Помните, качество – это не только мера слов на вашем сайте, их релевантность поисковым запросам и общий “E-E-A-T” отображается. Джон Мюллер из Google описал это как:
“Когда речь идет о качестве содержимого, мы не имеем в виду только текст ваших статей.
Это действительно качество вашего веб-сайта в целом.
И это включает все, от макета до дизайна.
Например, то, как вы размещаете вещи на своих страницах, как вы интегрируете изображение, как вы работаете со скоростью, все эти факторы, которые они здесь как бы участвуют.”
Итак, проверьте свой веб-сайт, учитывая эти критерии. Какое качество вашего сайта по сравнению с качеством ваших конкурентов?
Ретальный аудит веб-сайта — хорошее место для начала.
Проверить дубликаты страниц
Иногда на веб-сайте могут быть страницы низкого качества или дубликаты, о которых менеджер сайта не знает.
На страницу можно перейти через несколько URL. Возможно, у вас есть “Связаться с нами” страница, существующая как на exampledomain.com/contact-us, так и на exampledomain.com/contact-us/.
URL-адрес с “конечной косой чертой” Googlebot считает отдельными страницами, если он может охватить их обе, а сервер возвращает код статуса 200. То есть они обе живые страницы.
Существует вероятность, что все ваши страницы могут быть продублированы таким же образом.
На вашем веб-сайте также может быть много параметров URL-адреса, о которых вы не знаете. Это URL-адреса, содержащие “строки запроса,” например exampledomain.com/dress?colour=red.
Это обычно вызывается параметрами фильтрации и сортировки на вашем сайте. На веб-сайте электронной коммерции это может выглядеть как страница категории продукта, которая отфильтрована по таким критериям, как цвет, и может быть отсортирована по цене.
Как следствие, с помощью этой фильтрации и сортировки не изменяются основные функции страницы, изменяются только перечисленные продукты. Это технически отдельные страницы, которые можно сканировать, и они могут вызывать много дубликатов на вашем сайте.
Вы можете думать, что на вашем сайте только 100 высококачественных страниц. Однако из-за этих технических проблем робот Googlebot может увидеть сотни тысяч страниц, которые почти дублируются.
Пути исправления “Обнаружены – Пока не проиндексировано”
Если вы определили вероятные причины того, что ваш URL не индексируется, вы можете попробовать это исправить.
Если на вашем веб-сайте есть дубликаты страниц, низкое качество, скопированное содержимое или другие проблемы с качеством, это то, с чего начать.
Как побочное преимущество, вы, скорее всего, увидите, что ваш рейтинг на ваших страницах улучшится, когда вы будете работать над решением этих проблем.
Отметьте важность страницы
В примере нашего вводного вопроса есть определенная страница, которую Мандип пытается проиндексировать.
В этом случае я бы предложил попытаться повысить важность страницы в глазах поисковых систем. Дайте им причину сканировать его.
Добавить страницу к XML-карте сайта веб-сайта
Один из способов показать Google, что это важная страница, которая заслуживает просканирования и индексации, — это добавить ее к XML-карте сайта вашего сайта.
сущности, указатель ко всем URL-адресам, которые, по вашему мнению, поисковые работы должны сканировать.
Помните, Googlebot уже знает, что страница существует; он просто не&r;rsquo; считает, что сканировать и индексировать его полезно.
Если это уже есть в XML карте сайта, не останавливайтесь на достигнутом. Рассмотрите следующие шаги.
Добавить внутренние ссылки на страницу
Еще один способ продемонстрировать важность страницы — сделать ссылку на нее с внутренних страниц сайта.
Например, добавление страницы к основной навигационной системе, например к главному меню.
Или добавьте контекстные ссылки на него из копии на других страницах вашего сайта. Это означает Googlebot, что это важная страница на вашем сайте.
Добавить внешние ссылки на страницу
Обратные ссылки – они являются фундаментальной частью SEO. Некоторое время мы знали, что Google будет использовать ссылки с других веб-сайтов, чтобы определить релевантность и авторитет страницы для темы.
Если вам трудно показать Google, что ваша страница достаточно качественная для индексирования, тогда внешние ссылки с авторитетных релевантных веб-сайтов, указывающих на нее, могут дать дополнительную уверенность в ценности страницы.
Например, если страница, которую вы пытаетесь проиндексировать, — это конкретная страница с информацией о красном платье, то размещение страницы этого платья в некоторых модных блогах может дать Google означает, что это высококачественная страница.
Послать на сканирование
После внесения изменений на свой веб-сайт попробуйте повторно отправить страницу для сканирования через Google Search Console.
Если вы заметили в Google Search Console “Индексирование” сообщите, что URL-адрес все еще находится в “Обнаруженных – пока не сканируется” через некоторое время (для сканирования отправленной страницы Google может потребоваться от нескольких дней до нескольких недель), вы знаете, что потенциально у вас еще есть проблемы со страницей.
Итог
Оптимизируйте веб-сайт для сканирования и индексирования. Если вы это сделаете, вы, вероятно, увидите, что эти страницы переместятся с “Обнаруженных – пока не индексирован” к “Индексировано.”
Оптимизация вашего конкретного веб-сайта потребует углубленного анализа общего качества сайта и определения того, как передать важность “Открытых – пока не индексирован” страницы к Googlebot.