Багато запитів до джерела сайту повернули 5xx або 429 під час сканування
У звітіElevated 5xx/429 rate observed during this crawl
sustained_5xx_429_during_crawl · Проблема
Це з’являється, коли під час одного аудиту і частка, і кількість наших спроб до джерела сайту, що повернули 5xx або 429, досягають зафіксованих налаштувань (за замовчуванням 10% і три). Google сповільнює сканування, коли отримує такі відповіді, а URL-адреси, що постійно не відповідають, зрештою можуть зникнути з його індексу. З’ясуйте, через що ваш сервер дає збій або відмовляє під навантаженням.
Серйозність: Висока. Через такі відповіді Google сповільнює сканування сайту; знайдіть причину найближчим часом.
Чому це важливо
На сторінці Google про коди статусу HTTP сказано, що помилки 5xx і 429 змушують його сканери тимчасово сповільнитися; 429 там зараховано до помилок сервера, а про вже проіндексовані URL-адреси сказано, що спершу вони зберігаються, але зрештою вилучаються.
Що зробити
- Перегляньте знахідку: у ній показано сукупну кількість помилок, знаменник спроб, підсумки за статусами, збережені значення
Retry-Afterі зведення про зв’язок із часом запитів. - Перевірте журнали помилок вашого сервера за час аудиту: поширені причини — обмеження пам’яті чи бази даних, збійний плагін або правило обмеження частоти у фаєрволі.
- Якщо кодом 429 відповідає фаєрвол чи CDN, переконайтеся, що він не відмовляє пошуковим сканерам за звичайного темпу.
Коли залишити як є: якщо знахідку залишено на перегляд, бо наші швидші запити спричинили спрацювання вашого обмеження частоти, а ваші журнали показують, що пошуковим сканерам не відмовляють, можна залишити як є.
Що ми читаємо
Додаткових запитів ми не робимо: використовуємо власні запити аудиту до ваших сторінок, разом із повторними спробами, і пропускаємо запити до robots.txt, файлів карти сайту та запити інших перевірок. Сканер повторює запит один раз після 5xx, 429 чи розірваного з’єднання, і кожна спроба рахується. Запити, що не отримали жодної відповіді, як-от тайм-аути, входять до загальної кількості, але не до помилок.
Сайт фіксується, коли досягнуто і налаштованої частки спроб до того самого джерела — за замовчуванням 10%, — і налаштованої кількості відповідей 5xx або 429 — за замовчуванням три, — за оцінки щонайменше 10 відповідей. Це налаштування аудиту, які записуються з кожним аудитом. Код 403 чи інший 4xx помилкою не вважається.
Коли відповідей менше за мінімум, перевірка може лише підтвердити, що із сайтом усе гаразд, але ніколи не фіксує його, і лише після аудиту всього сайту, який завантажив кожну знайдену сторінку без пропуску сторінок через ліміт і без запитів, що лишилися без відповіді: сайт у порядку, коли відповідей 5xx або 429 менше за налаштовану кількість; інакше перевірка не може дійти висновку. Аудит вибраних сторінок не може дійти висновку, коли відповідей менше. У кожному разі перевірка не може дійти висновку, коли час запитів записано не повністю, коли хоч одна просканована адреса переспрямувала — навіть лише щоб додати кінцеву косу риску чи перейти з http:// на https://, — або коли відповідь надійшла з іншого хоста: тоді не кожен запит можна віднести на рахунок вашого сервера.
Приклад і докази
Ілюстративний приклад — відповіді одного аудиту, а не реальний аудит.
Аудит https://bakery.example/ зробив 60 запитів до сайту:
200 OK: 51
503 Service Unavailable: 7
429 Too Many Requests: 2Дев’ять із 60 спроб, 15%, повернули 5xx або 429, що відповідає обом налаштуванням прикладу (10% і три). У знахідці показано сукупну кількість за статусами та зведення про час, а не часову позначку кожної помилки.
Якби помилками були лише дві відповіді, знахідки не було б: менш ніж три не фіксуються.
Підтвердити й перевірити знову
Перевірте самі: пошукайте в журналі помилок вашого сервера або на панелі хостингу відповіді 5xx і 429 за час аудиту.
Повторна перевірка: Повний аудит — запустіть новий повний аудит. За мінімальної кількості відповідей і повного охоплення телеметрією знахідка закривається, коли частка помилок або кількість помилок опускається нижче свого зафіксованого порогу. Для малого сайту її також закриває аудит усього сайту, який завантажив кожну знайдену сторінку з меншою за мінімум кількістю відповідей і без запитів, що лишилися без відповіді, коли відповідей 5xx або 429 менше за налаштовану кількість. Сканування з прогалиною в охопленні, як-от адреса, що переспрямувала, не може цього підтвердити; знахідка, яка переходить між проблемою та переглядом, залишається тією самою знахідкою.
Обмеження та джерела
Підрахунок охоплює запити нашого сканера в одному аудиті, з його темпом, з одного місця: це не частота помилок Googlebot, і він не доводить, що сторінки вилучено з індексу. Коли помилки йдуть за нашим темпом, перевірка не може виключити обмеження, спрямоване лише на наш сканер.
Упевненість: Середня, бо один аудит — це коротка вибірка того, як відповідає сервер.
Джерела
- Google, Як коди статусу HTTP впливають на роботів Google — каже, що помилки 5xx і 429 змушують сканери Google тимчасово сповільнитися, вважає 429 помилкою сервера і каже, що проіндексовані URL-адреси зберігаються, але зрештою вилучаються. Перевірено 28 вересня 2026.
Редакційна перевірка: 29 жовтня 2026