Посилання веде на сторінку, заблоковану в robots.txt

Чому це важливо

У вступі Google до robots.txt сказано, що це не механізм для того, щоб не пускати сторінку в Google: заборонену URL-адресу однаково може бути проіндексовано, якщо на неї є посилання з інших місць, і тоді вона з’являється в результатах без опису. Посилання з ваших власних сторінок — одне з таких місць.

Що зробити

Перегляньте знахідку: у ній показано адресу, рядок robots.txt, який її блокує, і до десяти сторінок, що на неї посилаються.
Якщо адресу мають знаходити в пошуку, видаліть або звузьте рядок, що блокує.
Якщо не мають, приберіть посилання й тримайте її поза пошуком за допомогою noindex на сторінці, доступній для сканування, або пароля, а не лише через robots.txt.

Коли залишити як є: якщо адреса — це кошик, пошук чи сторінка облікового запису, які ви блокуєте свідомо, а відвідувачам потрібні посилання, можна залишити як є.

Що ми читаємо

Ми читаємо robots.txt, до перших 512 000 байтів, і посилання <a href> та <area href> у HTML кожної просканованої сторінки в тому вигляді, в якому його віддав сервер, з урахуванням <base href>. Посилання всередині <template>, <noscript> чи iframe пропускаються, і це правило не робить додаткового запиту до адреси посилання.

Адреса фіксується, коли посилання вказує на неї на тому самому протоколі, хості й порту, що й перевірений robots.txt, і його правила для Googlebot її забороняють: група, яка найточніше називає Googlebot, або *, причому перемагає найдовший збіг, а за рівності — Allow. Двійник із www. або без www. — це інше джерело, навіть коли обидва хости належать вашому сайту. rel="nofollow" не змінює рішення для посилання на те саме джерело.

Коли robots.txt відповідає кодом 4xx, відмінним від 429, як-от 404, усе вважається дозволеним. Нечитабельний robots.txt, неповний HTML, наприклад із непідтримуваною розміткою SVG, або понад 5 000 посилань можуть залишити сторінку неперевіреною. Посилання на ваш сайт з іншою схемою, хостом чи портом, як-от http:// або www., залишає рішення robots.txt для цього посилання невідомим; заблоковане посилання на те саме джерело на тій самій сторінці однаково можна зафіксувати, але охоплення перевірки для сторінки залишається неповним.

Приклад і докази

Ілюстративний приклад — один рядок robots.txt і одне посилання, а не реальний аудит.

https://bakery.example/robots.txt містить:

User-agent: *
Disallow: /search/

а https://bakery.example/cakes/ посилається на:

<a href="/search/?q=lemon">Lemon cakes</a>

Googlebot не може сканувати /search/?q=lemon, тому адреса фіксується разом із рядком і сторінкою, що на неї посилається.

Можливе виправлення: натомість посилайтеся на /cakes/lemon/.

Підтвердити й перевірити знову

Перевірте самі: порівняйте шлях адреси посилання з рядками Disallow у вашому robots.txt або відкрийте адресу в інструменті перевірки URL у Search Console.

Повторна перевірка: Повний аудит — запустіть новий аудит сайту. Знахідку можна підтвердити як виправлену, коли кожну сторінку, що посилалася на адресу, знову проскановано, прочитано повністю і вона більше на неї не посилається або robots.txt тепер її дозволяє, з переконливим охопленням перевірки для відповідних посилань цих сторінок. Сторінка, що раніше посилалася, також виходить із потрібної групи, якщо відповідає безпосередньо повним файлом 200, що не є HTML, або починається з підтвердженого постійного переспрямування в межах вашого сайту, за умови, що виконання правила залишається переконливим. Посилання на одній із решти сторінок на інше джерело вашого сайту може залишити порівняння непідтвердженим, навіть коли заблоковане посилання на те саме джерело фіксувалося раніше. Додавання rel="nofollow" до посилань знахідку не закриває, а сторінка з посиланням, яку не вдається прочитати або яку не проскановано знову, залишає її непідтвердженою.

Обмеження та джерела

Перевіряються лише правила для Googlebot, і рахуються лише посилання в HTML у тому вигляді, в якому його віддав сервер. Це правило не робить додаткового запиту до адреси посилання, тож ніщо не показує, що вона існує чи проіндексована, а бюджет сканування не вимірюється.

Упевненість: Висока, бо і посилання, і правило robots.txt зчитуються безпосередньо.

Джерела

Google, Вступ до robots.txt — каже, що robots.txt — це не механізм для того, щоб не пускати сторінку в Google, що заборонену URL-адресу однаково може бути проіндексовано, якщо на неї є посилання з інших місць, і тоді вона з’являється без опису. Перевірено 28 вересня 2026.

Редакційна перевірка: 29 вересня 2026

Посилання веде на сторінку, яка просить не показувати її в пошуку — посилання веде на сторінку, яка просить не показувати її в пошуку.
Сторінку, названу основною, заблоковано в robots.txt — сторінку, названу основною, заблоковано в robots.txt.