Сторінку не знайдено (404): як повернутися до потрібного товару

Автор: Олександр Петренко

Сторінка 404 — це та точка, де користувач або бот натрапляє на адресу, яка більше не відповідає жодному документу на сервері. Для сайту вона зазвичай виглядає як побічний ефект: переїхала стаття, змінилася структура каталогу, видалили товар. Але саме тут видно, наскільки акуратно побудована технічна частина ресурсу. Якщо сервер повертає правильний статус і логіка переадресацій продумана, втрати трафіку мінімальні. Якщо ж помилки накопичуються без контролю, позиції пошукової видачі починають сповзати. Ця стаття розбирає, як діагностувати джерело проблеми, як налаштувати сам статус відповіді та як провести виправлення без шкоди для індексації. Тема має прямий зв'язок із попереднім матеріалом про повідомлення «很抱歉，找不到您要瀏覽的部落格或已被刪除», де ми зупинялися на тому, що користувачеві треба пояснити ситуацію і запропонувати наступний крок: перевірити адресу або повернутися на головну. Однак це лише інтерфейс. Під ним має працювати коректна HTTP-відповідь, і саме про неї йдеться далі.

Як діагностувати джерело помилки 404

Першим кроком завжди є лог доступу сервера. У ньому можна побачити всі відповіді з кодом 404 і відсортувати адреси за частотою запитів. Зазвичай виявляється, що більшість помилок концентрується на кількох URL, а решта — одиничні випадки, які не варто виправляти вручну. Окремо важливо відфільтрувати звернення пошукових ботів за заголовком User-Agent. Якщо Googlebot регулярно стукає в адреси, яких немає, це сигнал про старі посилання в індексі або зовнішні джерела, а не про поведінку людей. Такі адреси мають інший пріоритет, бо від них залежить краулінговий бюджет.

Друга перевірка стосується характеру помилки. Постійна 404 на конкретному шляху свідчить про видалену сторінку або невірний маршрут у конфігурації. Періодична помилка, яка з'являється лише для окремих користувачів, частіше пов'язана з кешем, з різними версіями шаблону або з неправильною обробкою параметрів у рядку запиту. Щоб відрізнити одне від іншого, достатньо відтворити запит з різних пристроїв і з різних мереж. Якщо відповідь відрізняється, проблема лежить глибше, ніж видалений файл. Великогабаритний алюмінієвий профіль великогабаритний алюмінієвий профіль відрізняється від стандартних перерізів збільшеною шириною та висотою, тому його застосовують там, де потрібна жорсткість на значних прольотах, наприклад у каркасах фасадів і промислових конструкціях.

Наступні тижні — поетапне виправлення, починаючи з адрес із найбільшою кількістю зовнішніх посилань і трафіку

• Якщо бот регулярно запитує неіснуючі адреси, він витрачає ресурси, які могли б піти на важливі сторінки
• Перевірку посилань варто включити в процес публікації контенту, щоб нові матеріали не створювали битих адрес
• Вона має повертати правильний статус, допомагати користувачеві знайти потрібне і не потрапляти в індекс
• Контрольні точки варто ставити через два і через чотири тижні після впровадження: тоді видно, чи зменшується кількість помилок і чи відновлюються позиції ключових сторінок

Пошук битих посилань складається з двох окремих завдань. Внутрішні посилання знаходяться всередині самого сайту: їх можна зібрати скануванням, яке проходить усі сторінки і фіксує відповіді цільових адрес. Їх виправляють напряму, змінюючи шаблон, меню або текст статті. Зовнішні посилання, що ведуть на ваші неіснуючі сторінки з чужих ресурсів, виправити напряму неможливо, тому для них потрібен редирект на чинний аналог. Окремо перевіряють шаблони і навігацію: буває, що помилка тиражується в усіх сторінках через один хибний елемент меню, і тоді виправлення одного рядка знімає сотні записів.

Звіти в Search Console дають картину того, як пошукова система бачить вашу структуру. У розділі індексування видно URL зі статусом «не знайдено», а в деталях можна побачити джерела посилань на них. Це особливо корисно, бо часто виявляється, що посилання з каталогів або з партнерських сайтів ведуть на старі адреси. Також тут варто розрізняти м'яку помилку 404. Вона виникає, коли сторінка для неіснуючої адреси повертає статус 200, але фактично містить лише повідомлення про помилку або порожній шаблон. Пошукова система сприймає таку сторінку як дублікат або низькоякісний контент і поступово її ігнорує, але не звільняє від обробки.

Сторінка 404 та налаштування сервера

Головне правило звучить просто: сторінка помилки має повертати статус 404, а не 200. Коли сервер відповідає кодом 200 на неіснуючу адресу, він повідомляє пошуковому роботу, що документ є, і той намагається його індексувати. Так з'являється велика кількість схожих сторінок з однаковим текстом помилки, що розмиває сигнали релевантності. Типова причина таких «м'яких» 404 — налаштування, де при відсутності сторінки фреймворк рендерить шаблон із загальним макетом і не змінює код відповіді. Перевірити це можна у вкладці мережі браузера в інструментах розробника або командою curl з параметром виведення заголовків. У відповіді має бути рядок HTTP/1.1 404 або HTTP/2 404, а не 200.

Сама сторінка 404 має виконувати функцію навігації, а не тупика. Корисний варіант містить коротке пояснення без жаргону, поле пошуку, посилання на головні розділи і кілька популярних матеріалів. Не варто робити її складною: вона не повинна вантажити важкі скрипти і зовнішні запити, бо користувач уже перебуває в стані незадоволення. Щоб сторінка помилки не потрапляла в індекс, використовують мета-тег robots з директивою noindex або заголовок X-Robots-Tag. Реалізація відрізняється залежно від сервера: в Nginx це директиви error_page та add_header, в Apache — ErrorDocument і модуль headers, у CMS на кшталт WordPress або Joomla — окремий шаблон або плагін. Важливо перевірити, що власна сторінка не віддає 200 через кешування сторонніх плагінів.

Редиректи потрібні тоді, коли сторінка переміщена або змінила адресу. Для постійних переміщень застосовують 301, який передає більшу частину ваги посилань на нову адресу. Статус 302 призначений для тимчасових змін, наприклад для сезонної акції або тестування. Помилка, яку часто роблять, — використання 302 для постійної зміни структури: пошукова система довго тримає стару адресу в індексі. Ще одна проблема — ланцюжки редиректів, коли адреса A веде на B, а B на C. Кожен перехід уповільнює завантаження і може призвести до петлі, якщо правила конфліктують. Для великих проєктів має сенс вести карту редиректів у таблиці з колонками старої адреси, нової адреси, типу редиректу і дати внесення, щоб команда бачила, які правила вже існують.

Практичний алгоритм виправлення: від виявлення до перевірки

Перед початком роботи варто підготувати доступи: логи сервера, панель вебмайстра, актуальну карту сайту і бекап конфігурації. Бекап потрібен, бо неправильне правило в .htaccess або в конфігурації Nginx може зламати всі адреси одразу. Також складають список критичних сторінок, які приносять трафік або заявки. Їх виправлення має пріоритет над рештою, навіть якщо кількість помилок на них невелика. Тестове середовище дає змогу перевірити зміни до їх викатки на робочий сайт.

Порядок дій починається з фіксації поточного стану. Записують кількість 404 у логах за тиждень, топ адрес, поточні позиції ключових сторінок і кількість проіндексованих помилок у Search Console. Без цієї точки відліку неможливо буде зрозуміти, чи дало виправлення результат. Далі помилки пріоритизують за двома ознаками: скільки трафіку приходить на адресу раніше і скільки зовнішніх посилань на неї веде. Адресу з десятком якісних посилань варто переадресувати в першу чергу, навіть якщо вона рідко запитується напряму. Після цього вносять редиректи або відновлюють сторінки, якщо контент ще актуальний. Окремо оновлюють внутрішні посилання, щоб сайт не створював нових запитів до старих адрес. Наприкінці оновлюють карту сайту і надсилають її на повторну перевірку. Перед тим як вибрати перетин, варто звернути увагу на товщину стінок, тип сплаву та допуски на розміри, а для складних завдань корисно ознайомитися з Практичні поради щодо розрахунку навантажень і монтажу.

Результат оцінюють через кілька тижнів, а не одразу. Порівнюють динаміку помилок у логах і звітах, звертаючи увагу на те, чи зменшилася кількість запитів до старих адрес. Перевіряють, що редиректи ведуть на релевантні сторінки, а не на головну. Масове перенаправлення на головну пошукові системи часто трактують як м'яку помилку, і ефект від нього мінімальний. Також варто стежити за поведінкою користувачів на сторінці помилки: скільки з них переходять на інші розділи, а скільки закривають вкладку. Якщо показник відмов залишається високим, сторінка не виконує свою роль.

Чеклист: на що дивитися та де найчастіше помиляються

Для швидкої перевірки достатньо чотирьох критеріїв. Сторінка 404 повертає правильний статус і не індексується. Внутрішні посилання не ведуть на неіснуючі адреси. Усі переміщення оформлені 301-редиректом на тематично близьку сторінку. Карта сайту містить лише робочі адреси, без редиректів і помилок. Якщо будь-який пункт не виконується, це варто виправляти в першу чергу, бо саме вони найчастіше впливають на видачу.

Типових помилок кілька, і вони повторюються від проєкту до проєкту. Найпоширеніша — масове перенаправлення всіх битих адрес на головну сторінку. Це створює враження порятунку, але з погляду користувача він отримує несподіваний результат, а з погляду пошукової системи сигнал слабкий. Друга помилка — ігнорування запитів від ботів. Третя — видалення сторінок без перевірки зовнішніх посилань на них. Після видалення ці посилання перетворюються на битий трафік, і його вже не повернути без редиректу. Четверта — ланцюжки з кількох редиректів підряд, які сповільнюють завантаження і розмивають передачу ваги.

Довгострокова підтримка вимагає системності. Автоматичний моніторинг помилок має працювати постійно, а не лише під час аудиту. Правила редиректів документують так, щоб вони були доступні всій команді: розробникам, редакторам і маркетологам. Без такого документування через рік ніхто не зможе пояснити, чому конкретна адреса веде саме туди.

Висновки та подальші кроки

Головний принцип простий: кожна битa адреса має або відновлюватися, або коректно переадресовуватися на релевантну сторінку. Сторінка 404 у цьому процесі є запасним варіантом, а не основним інструментом. Баланс між зручністю людини і технічною коректністю досягається тоді, коли обидва ці завдання вирішуються одним налаштуванням, а не двома окремими.

Практичний план на перші тижні можна побудувати так. Перший тиждень присвячують аудиту: збирають логи, звіти, список критичних сторінок і пріоритизують помилки. Якщо після цього динаміка позитивна, процес переходить у режим регулярного моніторингу. Саме так сторінка 404 перестає бути джерелом втрат і стає звичайним, контрольованим елементом технічної інфраструктури сайту.