Бесплатная проверка индексируемости
Чтобы страница появилась в результатах поиска, поисковые системы должны иметь возможность открыть её, прочитать и получить разрешение на индексацию. Этот инструмент выполняет шесть технических проверок, которые чаще всего мешают индексации, и отмечает всё, что нужно исправить. Вставьте URL, чтобы проверить страницу.
Что проверяет этот инструмент
- HTTP-статус: страница должна отдавать код 200. Цепочки редиректов и ответы 4xx или 5xx блокируют индексацию или отправляют поисковые системы на другой адрес.
- HTTPS: страница должна загружаться по защищённому соединению, без редиректа на незащищённый или другой URL.
- Robots.txt: файл robots.txt не должен закрывать путь страницы от поисковых роботов.
- Noindex: в meta-теге robots и заголовке X-Robots-Tag не должно быть
noindex— эта директива велит поисковым системам не включать страницу в индекс. - Canonical: тег canonical должен указывать на саму страницу, иначе поисковые системы проиндексируют указанный в нём URL.
- Карта сайта: карта сайта помогает поисковым системам найти страницу и заметить её изменения.
Индексируемая — ещё не значит проиндексированная
Если страница прошла все проверки, значит, технических препятствий для поисковых систем нет. Но это не гарантирует, что она попадёт в индекс: поисковые системы всё равно сами решают, стоит ли включать каждую страницу. Воспользуйтесь нашей бесплатной проверкой индексации в Google, чтобы узнать, есть ли страница в Google на самом деле, а если её там нет, прочитайте, почему страницы сканируются, но не индексируются.
Часто задаваемые вопросы
Что значит «индексируемая» страница?
Страница индексируемая, если поисковые системы могут успешно её загрузить и ничто на странице или сервере не велит им её исключить. Это техническое условие для появления в результатах поиска, а не гарантия.
Страница прошла все проверки. Почему её до сих пор нет в Google?
Сканирование новых страниц может занять от нескольких дней до нескольких недель, а Google может решить не индексировать страницы, которые считает малоценными или дублирующимися. Проверьте статус страницы в инструменте проверки URL в Search Console или с помощью бесплатной проверки индексации, а затем при необходимости усильте внутренние ссылки и контент.
Отсутствие карты сайта — это проблема?
Не всегда. Небольшие сайты с хорошей внутренней перелинковкой индексируются и без неё. Для крупных сайтов или страниц с небольшим количеством внутренних ссылок карта сайта заметно помогает поисковым системам находить новые и обновлённые URL.
Может ли robots.txt удалить страницу из результатов поиска?
Нет. Robots.txt только запрещает сканирование, а заблокированная страница всё равно может появиться в выдаче, если на неё ссылаются другие сайты. Чтобы исключить страницу из индекса, разрешите сканирование и используйте noindex.
Относится ли эта проверка к Bing и другим поисковым системам?
Да. Эти технические сигналы стандартны для всех крупных поисковых систем, поэтому страница, прошедшая проверку здесь, технически индексируема в Google, Bing и других.