🚨 КРИТИЧНО: Soft 404 на 144 страницах + дубли title/description

Диагностика — найти корень soft 404

Почему Bitrix отдаёт HTML «404 Not Found» с кодом 200? Варианты:

• Страница раздела /india/kerala/ существует в Bitrix, но привязан шаблон, который при отсутствии данных показывает 404-контент без смены HTTP-кода
• Отсутствует контент в инфоблоке для конкретного региона (элементы не созданы, либо деактивированы)
• Ошибка в компоненте bitrix:news.detail или :catalog.section — возвращает 404 внутри, но nginx/apache возвращает 200

Что сделать:

1. Открыть любой URL из списка (например /india/kerala/) через админку Bitrix
2. Понять, какой компонент рендерит страницу
3. Найти, где он решает «показать 404 content» и отдаёт код 200
4. Задокументировать найденную причину (понадобится для всех 144 страниц)

Решение по каждой категории URL

Делим 144 URL на группы по назначению:

Два варианта решения:

• A. Заполнить контент — по ключевым регионам (Керала, Гоа, Мале) обязательно. Это упущенный SEO-трафик.
• B. Удалить через 301-редирект на родительский раздел — если страница не нужна (например, малоизвестные городки).

Владелец сайта решает по каждой группе. По умолчанию: Керала/Гоа/Мале — заполнить, остальное — на усмотрение.

Починить HTTP-код для настоящих 404

Если страница ДОЛЖНА быть 404 — она должна отдавать HTTP 404, а не 200 с 404-контентом.

Что сделать:

1. В компоненте / шаблоне: если данных нет → header("HTTP/1.1 404 Not Found"); \\CHTTP::SetStatus("404 Not Found");
2. Проверить каждую страницу: curl -I URL → должно быть 404, а не 200
3. Добавить в robots.txt шаблоны мусорных URL (если есть)

Разобраться с 5442 близкими дублями контента

Screaming Frog нашёл 5442 URL с близким контентом. Это большое число. Вероятные причины:

• Параметрические URL (?sort=, ?filter=, ?page=)
• Пагинация без rel=next/prev
• Разные URL для одного и того же (/tours/ и /all/tours/)
• Мусор из iblock-52 (SEO_DESCRIPTIONS — см. отдельное ТЗ по sitemap)

Что сделать:

1. Открыть файл контент_близкие_дубликаты.csv
2. Сгруппировать по паттернам URL
3. Решение по каждому паттерну: canonical, 301, noindex или исключить из sitemap

Настроить автогенерацию уникальных title/description

В Bitrix для каждого раздела / страницы должны быть:

• Title уникальный, с ключом + брендом (пример: «Туры в Кералу — аюрведа, пляжи | Аюрведа-Тур»)
• Description уникальный, 140-160 символов, с призывом к действию
• H1 уникальный, без повтора title

Как реализовать в Bitrix:

// В шаблоне раздела — автогенерация если вручную не задано
$APPLICATION->SetPageProperty("title", $arResult["NAME"] . " — туры и отдых | Аюрведа-Тур");
$APPLICATION->SetPageProperty("description", "Полный гид по " . $arResult["NAME"] . ": отели, программы аюрведы, цены от 1500$. Подбор тура бесплатно.");

Мониторинг после фикса

1. Через 1 неделю — перепрогнать Screaming Frog, сравнить число дублей
2. В Яндекс.Вебмастер — посмотреть уменьшение дублей
3. В GSC — раздел «Индекс» → «Индексировано, но не отправлено»
4. Мониторить позиции по топ-ключам (аюрведа керала, туры в Гоа) — ожидаем рост