Почему сайта нет в Яндексе: индексация по шагам
Почему новый сайт или страницы не появляются в Яндексе: robots.txt, noindex, карта сайта, ошибки ответа, дубли. Проверка по шагам и как ускорить индексацию.
Сайт студии ремонта запустили месяц назад. По названию компании он находится, а по услугам нет ни одной страницы. В Вебмастере выяснилось: в robots.txt со времён разработки осталась строка, запрещающая индексацию всего сайта. Её убрали, и через две недели страницы начали появляться в поиске.
Если сайта или его страниц нет в Яндексе, причина почти всегда находится за полчаса. Ниже проверка по шагам и способы ускорить индексацию.
Проверка по шагам
Шаг 1
Сайт добавлен в Вебмастер
Без этого вы не видите, что Яндекс знает о сайте и какие ошибки нашёл.
Шаг 2
robots.txt
Нет ли запрета Disallow: / или запрета нужных разделов.
Шаг 3
Метатег noindex
Не остался ли он на страницах после разработки.
Шаг 4
Ответ сервера
Страницы отдают код 200, без ошибок и бесконечных перенаправлений.
Шаг 5
Карта сайта
sitemap.xml есть, указана в robots.txt и добавлена в Вебмастер.
Шаг 6
Дубли и зеркала
Сайт открывается по одному адресу: с www или без, только по https.
Частые причины
| Причина | Как проявляется | Что сделать |
|---|---|---|
| Запрет в robots.txt | В Вебмастере страницы «запрещены robots.txt» | Убрать запрет |
| noindex на страницах | Страницы загружены, но исключены | Убрать метатег |
| Ошибки сервера | Код 5xx или долгие ответы | Исправить хостинг или приложение |
| Дубли | Одна страница по нескольким адресам | Перенаправления и canonical |
| Мало содержания | Страницы исключены как малоценные | Добавить полезный текст |
| Новый домен | Робот приходит редко | Карта сайта, IndexNow, ссылки |
Как ускорить индексацию
- Карта сайта с датами изменений, добавленная в Вебмастер.
- IndexNow: сайт сам сообщает Яндексу и Bing о новых и изменённых страницах.
- Переобход в Вебмастере для самых важных страниц, у него есть суточная квота.
- Ссылки с уже проиндексированных площадок: соцсети, каталоги, партнёры.
- Регулярные обновления: робот чаще приходит на сайты, где что-то меняется.
Google тоже проверьте
Для Google то же самое делается в Search Console: отправить карту сайта и проверить страницы инструментом проверки URL. Как подключить оба кабинета, в статье Яндекс Вебмастер и Search Console.
Сколько стоит
| Услуга | Цена | Что входит |
|---|---|---|
| Базовый SEO-аудит | 7 000 ₽ | Проверка сайта по основным признакам |
| Расширенный SEO-аудит | от 15 000 ₽ | Структура, тексты, техническая часть |
| Первичная SEO-оптимизация | от 15 000 ₽ | Заголовки и описания, разметка, структура страниц |
| SEO-сопровождение | от 7 000 ₽ в месяц | Регулярная работа над позициями |
| SEO-статья | от 1 500 ₽ | Статья под поисковый запрос |
| Настройка аналитики и целей | от 5 000 ₽ | Видно, откуда приходят заявки |
Как мы делаем
Начинаем с аудита: смотрим индексацию, структуру, страницы услуг и тексты. Даём список правок по важности, исправляем основу и подключаем аналитику, чтобы видеть заявки из поиска. Подробности на странице SEO и контента, расчёт в калькуляторе.
Частые вопросы
Сколько ждать индексации нового сайта?
От нескольких дней до нескольких недель. Ускоряют карта сайта, IndexNow и переобход в Вебмастере.
Почему по названию компании сайт находится, а по услугам нет?
Страницы услуг могут быть не проиндексированы или проигрывать конкурентам по содержанию. Начните с проверки индексации.
Что такое IndexNow?
Протокол, через который сайт сам сообщает поисковикам об изменениях. Яндекс и Bing его поддерживают, Google нет.
Может ли хостинг мешать индексации?
Да: если сайт часто недоступен или отвечает медленно, робот приходит реже и исключает страницы.
Коротко
- Чаще всего индексации мешают robots.txt, noindex и ошибки сервера.
- Добавьте сайт в Вебмастер и посмотрите, какие страницы исключены и почему.
- Карта сайта и IndexNow ускоряют появление новых страниц.
- Если через месяц страниц нет, ищите техническую причину.
Что входит в полную проверку, в статье SEO-аудит сайта.