< P > Тревога издателя через миллионы запросов Googlebot на неэффективных страницах была реализована, поскольку сайт теряет видимость поиска.
< img width = "1600" height = "840" src = "https://www.searchenginejournal.com/wp-content/uploads/2025/06/06/googlebot-ddos-crainling-498.jpg" Size-Full WP-POST-IMAGE "ALT =" Google Responds to Site That Lost Ranks After Googlebot DDOS "FetchPriority =" High Decoding = "async" srcset = "" https://www.searchenginejournal.com/wp-content/uploads/2025/06/googlebot crawling-498.jpg 1600W, https://www.searchenginejournal.com/wp-content/uploads/2025/06/googlebot-dos crawling-498-480x252.jpg 480w, https://www.searchenginejournal.com/wp-content/uploads/2025/06/googlebot-dos crawling-498-680x357.jpg 680w, https://www.searchenginejournal.com/wp-content/uploads/2025/06/googlebot-dos crawling-498-384x202.jpg 384w, https://www.searchenginejournal.com/wp-content/uploads/2025/06/googlebot-dos crawling-498-768x403.jpg 768w, https://www.searchenginejournal.com/wp-content/uploads/2025/06/06/googlebot-dos-crawling-498-1024x538.jpg 1024w "Размеры =" (макс-100px) ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ ~ < p >Джон Мюллер отреагировал на веб-сайт, который получил миллионы запросов Googlebot на страницы несуществующих с одним несуществующим URL, который получил более двух миллионов попаданий, по сути, есть миллионы запросов Googlebot на страницы, которые не существуют. Проблемы издателя; < H2 > Страницы noindex удаляются и преобразованы 410
< p > Код ответа на сервер 410 нет принадлежит к семейным кодам 400, что указывает на то, что страница недоступна. Ответ 404 означает, что страница недоступна и не объявляет, возвращается ли URL в будущем, она просто говорит, что страница недоступна.
< P > Код состояния 410 Отсутствующий означает, что страница исчезла и, вероятно, никогда не вернется. В отличие от кода штата 404, 410, браузера или гусеницы, отсутствующее состояние ресурса является преднамеренным и что любые ссылки на ресурс должны быть удалены.
< P > Человек, который задает вопрос, решил вопрос, который они разместили три недели назад на Reddit, где они отметили, что у них было около 11 миллионов URL -адресов, которые не были показаны, что они были полностью удалены и начали обслуживать 410 кода ответа. Через полтора месяца Googlebot продолжал возвращаться в поисках пропущенных страниц. Они разделили свою обеспокоенность по поводу бюджета сканирования и последующих последствий их рейтинга.
< P > Müller В то время отправлено их на страницу поддержки Google.
< p >< Стронг > См. < H2 > Потеря рейтинга, когда Google продолжает добраться до сайта на уровнях DDOS < p >Три недели все не улучшилось, и они опубликовали еще один вопрос, отметив, что они получили более пяти миллионов запросов на неожиданные страницы. Они опубликовали фактический URL -адрес в своем вопросе, но я анонимный его, в противном случае это «rsquo; s vorbatim.
< p >< em > Человек спросил: 0 ~/p > < Blockquote >< P > & ldquo; Googlebot продолжает агрессивно ползти по одному URL (с линиями запросов), даже если это сейчас около двух месяцев.
~ ~ ~ ~ ~ ~ ~ ~ < P > За последние 30 дней мы видели около 5,4 миллиона запросов с Googlebot. Из них около 2,4 миллиона были направлены на этот URL: < Br > https://example.net/software/virtuald-dj/z ? Строка запроса функции.
< p >Мы & Rsquo; В течение этого периода также наблюдал значительное падение нашей видимости в Google, и я могу & Rsquo; Помогите, но удивляется, есть ли усилитель; Rsquo; S с ' Unity & MDASH; Что -то просто чувствует. Страница Scared: < Br > https://example.net/software/virtual-dj/~630feature=& hellip; ~ 00 ~ //p ~ 2 ~ < P > Причина Google обнаружила все эти URL -адреса, в первую очередь, мы непреднамеренно выявили их в полезной нагрузке JSON, созданном Next.js & MDASH; У них нет фактических ссылок на сайте.
< p > Мы изменили то, как наша & ldquo; несколько функций & Rdquo; Работает (используя ? MF QueryString и что QueryString находится в robots.txt)
< p > Было бы проблематично добавить что -то похожее на наши роботы. TXT ? 0 ~/p > < P > BOD:/Software/Virtual-DJ/? function =*
< P > Основная цель: чтобы остановить этот чрезмерный ползучесть от наводнения наших бревен и потенциально провоцировать непреднамеренные побочные эффекты. & Усилитель; Rdquo;
< p >Google & Rsquo; С. Джон Мюллер подтвердил, что это & amp; Rsquo; S Creatable Bewing Google, чтобы продолжать повернуться, чтобы проверить, отсутствует ли страница. Это Google & Rsquo; Это должно быть полезной функцией для издателей, которые могут непреднамеренно удалить веб -страницу.
< p >< em > Müller ответил: 0 >/p > < Block Flower >< P >& ldquo; Google пытается восстановить страницы, которые когда -либо существовали в течение очень долгого времени, и если у вас много, вы, вероятно, видите их больше. Это не проблема & ndash; Это & Rsquo; Это означает, что постоянное ползание работы. Txt также хорош, если запросы раздражаются. < H2 > Осторожно: технический SEO впереди < p > Следующая часть – это место, где SEO получает оборудование. Мюллер предупреждает, что предлагаемое решение добавления robots.txt может случайно сломать рендеринг для страниц, которые имеют & Rsquo; T, вероятно, отсутствует.
< p >< Стронг > он & Rsquo; S в основном советует человеку, который задает вопрос:
< ul > < li > Двухпроверьте, что ? function = URL вообще не используется ни в одном фронте или коде полезных нагрузок JSON, которые подают важные страницы.
< li > Используйте Chrome Devtools, чтобы имитировать то, что происходит, если эти URL -адреса блокируются & MDASH; Чтобы поймать поломку рано.
< li >Поиск консоли монитора для M ' который 404, чтобы заметить какое -либо непредвзятое влияние на страницы, которые должны быть проиндексированы.
< p >< em > Джон Мюллер Продолжение: 0 ~/p > < Blockquote >< P > & ldquo; Главное, что я возвращаю 404/410, а не то, что некоторые из них используются чем -то вроде JavaScript < p > Очень трудно признать, когда вы повторяете ползание встроенного ресурса (будь то непосредственно в страницу или загружен по требованию) & ndash; Иногда страница, на которую она ссылается, останавливает визуализацию и может быть проиндексирована вообще.
< P > Если у вас есть страницы на стороне JavaScript клиента < p > Если вы можете & Rsquo; t с ' Ясно, где они были, я & Rsquo; D, чтобы запретить их часть и следовать < p > Если вы & Rsquo; Re Не используйте JavaScript Client Ranger, вы, вероятно, можете игнорировать этот товар :-). & Усилитель; Rdquo;
~ ~ < p >< Стронг > См. < H2 > Разница между очевидной причиной и фактической причиной < p > Google & Rsquo; С. Джон Мюллер имеет право предложить более глубокий диагноз, чтобы исключить ошибки из издателя. Ошибка издателя начала цепочку событий, которые привели к индексации страниц против желаний издателя. Таким образом, было бы разумно попросить издателя проверить, может ли быть более правдоподобная причина для учета потери видимости поиска. Это классическая ситуация, когда очевидная причина не обязательно является ' Это правильная причина. Существует разница между очевидной причиной и фактической причиной. Итак, Мюллер & Rsquo; Предложение не отказываться от того, чтобы найти причину, является хорошим советом.
< P > Прочитайте оригинальное обсуждение здесь.