Коллеги, принёс свежий кейс с новым проектом. Хочется понять — это у нас рукожопство, баг Яндекса или закономерный этап жизни молодого сайта, про который забывают писать в мануалах.
Исходные данные
-
Сайт: новый, чистый, белый. Возраст — около 4 месяцев с момента регистрации домена.
-
Тематика: медицина, услуги, ничего запрещённого.
-
Технически: всё настроено — robots.txt, sitemap.xml, канонические, ЧПУ. Сайт добавлен в Яндекс.Вебмастер, подтверждены права.
-
Страниц на момент событий: примерно 70. Контент уникальный, написан людьми, без спама.
-
Никаких накруток, ссылок, РСЯ и прочего.
Хронология «танцев с бубном»
-
Первая отправка на переобход
Сразу после публикации страниц мы пошли в Вебмастер → «Переобход страниц» и отправили все URL (около 70 штук). Потому что знаете это чувство, когда «ну пожалуйста, побыстрее».
Результат:-
90% страниц получили статус «Ошибка».
-
Оставшиеся ~10 страниц — статус «Заявка обработана».
Никакой конкретики, что за ошибка. Просто «Ошибка».
-
-
Первый контакт с поддержкой
Написали в техподдержку Яндекса через форму обратной связи в Вебмастере. Приложили скрины, список URL, описали ситуацию.
Ответ пришёл через 4 дня (прикрепляю скриншот переписки):«Здравствуйте! Простите, что заставляем вас ждать. Мы прилагаем все усилия, чтобы разобраться в ситуации, но пока решить вопрос не удалось.
Как только станет что-то известно — я дам вам знать».
Ни сроков, ни диагноза. Просто «разбираемся».
-
Ожидание и вторая отправка
Прошло 2 недели. Тишина. Страницы сами по себе почти не индексировались — в поиск попало от силы 2-3 штуки.
Решили повторить отправку на переобход тех же 70 URL. И — о чудо — в этот раз:-
Все 100% страниц получили статус «Заявка обработана».
-
Ошибок — ноль.
Казалось бы, победа.
-
-
Реальность после «успешной» отправки
Прошло ещё 20 дней. Заходим в Вебмастер → «Страницы в поиске». Картина:
-
Проиндексировано около 50% страниц (примерно 35 из 70).
-
При этом в реальной выдаче Яндекса мы видим только 2 (две!) страницы. Проверяли вручную по операторам, через разные IP. Остальные 47 проиндексированных висят где-то, но на запросы не показываются. По данным вебмастера страниц в поиске 2.
ИКС на данный момент — 0. Трафик из Яндекса — меньше 5 переходов в сутки.
-
Что мы проверили (всё чисто)
-
Ошибки краулинга в Вебмастере — нет.
-
Санкции, ограничения, уведомления от Яндекса — пусто.
-
Файл sitemap.xml — принят, обработан без ошибок.
-
Контент не скопирован, не шаблонный.
-
Страницы не закрыты от индексации, не канонизированы куда-то не туда.
-
Возраст домена — 4 месяца. Возможно, это всё объясняет, но...
Вопросы к сообществу
-
Массовая «Ошибка» при переобходе — это баг? Кто-то сталкивался с подобным на новых сайтах? Или это особенность обработки очереди?
-
Почему проиндексировано 50%, а в поиске — только 2? Куда делись остальные страницы? Это «песочница» для молодого сайта, при которой страницы в индексе есть, но на ранжирование подаются избранные?
-
Стоит ли вообще дёргать переобход на новом сайте, или лучше просто ждать естественного краулинга? Может быть, мы «переспамили» заявками и попали в какой-то теневой фильтр?
-
Как ускорить выход в поиск оставшихся страниц? Может, есть рабочие методы: кросс-ссылки с уже проиндексированных страниц, QR-коды, RSS? Или только время?
-
Что с ИКС? Он до сих пор 0. Нормально ли это для проекта возрастом 4 месяца и 35 страниц в индексе? Или это косвенный признак того, что сайт болтается в «серой зоне»?
Очень жду реальных историй и советов, особенно от тех, кто запускал новые сайты в последний год. Если у кого-то есть скрины из Вебмастера с такой же «ошибкой» — кидайте, попробуем собрать статистику.