Как проверить индексацию сайта: 4 проверенных способа

Часто задаваемые вопросы наших пользователей

Для нашей системы на самом деле на важен какой был указан регистр, а важно какой УРЛ был проиндексирован в поисковой системе. Если в Яндексе или в Google этот урл http://www.rush-Analytics.ru будет в индексе и мы его покажем в индексе

Если же он не проиндексирован у них у нас будут те же результаты. С этим URL будет так же http://www.rush-analytics.ru
Проблемы с индексацией при верхним и нижним регистром чаще всего возникают, когда сайт с нижнего регистра перешел на верхний или на оборот. Но поисковик не успел проиндексировать часть страниц. То есть, часть в индексе по старому регистру, а часть уже по новому. Либо могут все страницы быть еще по старому регистру, а новые индексацию еще не прошли.

Пошаговый алгоритм работы с сервисом:

1. Создание задачи. Чтобы создать задачу, необходимо перейти во вкладку проверка индексации и нажать «Создать новую задачу»
2. Шаг первый.
   Здесь необходимо ввести название задачи (обязательное поле). Можно ввести любое название, часто бывает удобно вводить название сайта, чтобы в будущем легко найти нужную задачу.
    
3. Второй шаг. Поисковая система и регион
   Мы указываем поисковую систему, по данным которой будет проверяться индексация. Можно выбрать Яндекс и Google.
   Для Google на данный момент доступны все регионы и языки
    
4. Третий шаг. « URLs и цена»
5. Здесь возможна загрузка запросов в поле интерфейса, через файл, а так же через ссылку на файл XML Sitemap.
   Так же можно установить «Эксперт опции» если вам нужна проверка точного URL (с учетом закрывающего / ).
    
6. Нажимаем «Создать новую задачу» — ваша задача отправлен на проверку индексации!
7. Теперь можно отслеживать статус задачи во вкладке «Очередь» или же в списке задач по проверке индексации.
   На данный момент в Rush Analytics есть несколько статусов:В очереди – данные еще не собираются, задача ждет своей очереди на сбор данныхСбор данных – счетчик показывает, сколько ключевых слов обработаноНа паузе – вы можете вручную поставить задачу на паузу, если не уверены, что хотите его собирать. Или же, задача может сама встать на паузу т.к. у вас кончились деньги на балансе.Готов – задача готова — вы можете посмотреть результаты в веб-интерфейсе или скачать в формате XLSX
    

Дальше, можно просмотреть результаты в веб интерфейсе, скачать готовый отчет и отредактировать задачу.
 

Руководство по работе с редактированием задачи

Здесь можно:

• Изменить название задачи
• Изменить поисковую систему
• Изменить «Эксперт опции»
• Сохранить новые настройки

В файле каждый URL будет помечен как 1 или 0 (1 – страница находится в индексе поисковой системы, 0 – страница не в индексе).Проверка индексации страниц сайта в Rush Analytics

Как ускорить индексацию – теория и практика

Давайте разберемся с основными способами ускорения индексации сайта, так сказать в теории и на практике.

Составил карты сайта

Карту сайта формата xml и карту сайта для людей (html) я составил в первую очередь. Карту xml добавил в панель Вебмастера.

Составил правильный robots.txt

Второе, что я сделал – составил файл robots.txt.

Вот он, по-моему, правильный:

Естественно в последних трех строках адрес сайта был заменен на новый.

При проверке в Яндекс.Вебмастере любой страницы нового сайта результат индексации – разрешен.

Минутку внимания 🙂

Постоянное обновление контента

Как и рекомендовал руководитель нашего марафона, контент обновляю ежедневно. Изначально публиковал записи каждый день, потом (на выходных) запланировал публикацию новых статей на неделю.

Статьи тематические, уникальные, объемные, в общем все как Яндекс любит…

Руками осуществляю перелинковку, организован вывод похожих записей в конце поста.

Посты с блога я анонсирую во многие социальные сети: вконтакте, фейсбук, твиттер, сервисы социальных закладок. Подробно обо всем этом (как автоматизировать весь процесс) писал в статье про получение блогом тиц-10.

Анонсы с сайта под РСЯ идут только в твиттер. В другие социальные сети не публикую. Создал для этих целей специальный аккаунт, зафоловил 20 тематических профилей. К сожалению, мой аккаунт пока мало кто добавил к прочтению.

Но надеюсь, что боты поисковых систем твиттер мониторят активно.

Прогон

Дмитрий в своих видео кастах рекомендовал сделать прогон. Планирую сделать его, когда сайт будет проиндексирован. Надеюсь, что ждать уже не долго.

Способы проверки индексации сайта

Предлагаем вашему вниманию 4 самых распространенных и простых способа, позволяющие проверить, какие страницы есть в индексе, а какие – нет.

1. Через панель вебмастера

Этим методом владельцы веб-ресурсов проверяют их наличие в поиске чаще всего.

Яндекс

1. Авторизуйтесь в Яндекс.Вебмастер.
2. Перейдите в меню «Индексирование сайта».
3. Под ним найдите строку «Страницы в поиске».

Можно пойти и по другому пути:

1. Выберите «Индексирование сайта».
2. Дальше перейдите в «История».
3. Затем кликните на вкладку «Страницы в поиске».

И первым, и вторым способом вы сможете изучить динамику роста или спада числа страниц в поисковой системе.

1. Зайдите в панель управления сервиса .
2. Кликните на вкладку Search Console.
3. Перейдите в «Индекс Google».
4. Нажмите на опцию «Статус индексирования».

2. Через операторов поисковых систем

Они помогают уточнить результаты поиска. Так, применение оператора «site» позволяет увидеть приблизительное число страниц, которые уже находятся в индексе. Чтобы проверить этот параметр, в строке поиска Яндекс либо Google укажите: «site:адрес_вашего_сайта».

Важно! Если результаты в Google и Яндекс сильно разнятся между собой, то значит ваш сайт имеет какие-то проблемы со структурой сайта, мусорными страницы, индексацией или на него наложены санкции. Для поиска вы также можете использовать дополнительные инструменты, например, чтобы узнать, как изменялась индексация страниц за определенный период времени

Для этого под поисковой строкой нажмите на вкладку «Инструменты поиска» и выберите период, к примеру, «За 24 часа»

Для поиска вы также можете использовать дополнительные инструменты, например, чтобы узнать, как изменялась индексация страниц за определенный период времени. Для этого под поисковой строкой нажмите на вкладку «Инструменты поиска» и выберите период, к примеру, «За 24 часа».

3. Посредством плагинов и расширений

Используя специальные программы, проверка индексации веб-ресурса произойдет автоматически. Это можно сделать с помощью плагинов и расширений, еще известных как букмарклеты. Они представляют собой javascript-программы, которые сохраняются в браузере в виде стандартных закладок.

Преимущество плагинов и расширений в том, что вебмастеру нет необходимости каждый раз по новой заходить в поисковик и вводить там адреса сайтов, операторы и прочее. Скрипты произведут все в автоматическом режиме.

Самым популярным плагином, применяемым в этих целях, является RDS bar, который можно скачать в магазине приложений любого браузера.

Стоит отметить, что в Mozilla Firefox у плагина куда больше возможностей, чем в других браузерах. RDS bar предоставляет информацию относительно и всего веб-сайта, и его отдельных страниц

На заметку. Есть платные и бесплатные плагины. И самый большой минус бесплатных плагинов в том, что в них регулярно нужно вводить капчу.

Нельзя оставить без внимания и букмарклет «Проверка индексации». Чтобы включить программу, просто перетяните ссылку на панель браузера, а затем запустите свой портал и нажмите на закладку расширения. Так вы откроете новую вкладку с Яндекс или Google, где изучите нужную информацию касательно индексации определенных страниц.

4. С помощью специальных сервисов

Я в основном пользуюсь сторонними сервисами, потому что в них наглядно видно какие страницы в индексе, а какие там отсутствуют.

Бесплатный сервис

https://serphunt.ru/indexing/ — есть проверка, как по Яндекс, так и по Google. Бесплатно можно проверить до 50 страниц в сутки.

Платный сервис

Из платных мне больше всего нравится Topvisor — стоимость 0.024р. за проверку одной страницы.

Вы загружаете в сервис все страницы вашего сайта и он вам покажет, какие находятся в индексе поисковых систем, а какие нет.

Проверка индексации Яндексом

Так как Яндекс является лидирующей русскоязычной поисковой системой и предоставляет наиболее полную информацию об индексации сайта, мы уделим ему максимум внимания.

Для того, что бы получить наиболее полную информацию, Вам понадобиться настроить Яндекс Вебмастер. (Инструкция  подключения находится на официальном сайте Яндекса). Он позволит получить исчерпывающие данные об индексации Вашего ресурса.

После того, как Вебмастер будет подключен, переходим на вкладку «Индексирование«->»Статистика обхода«. Перед Вами откроется следующая информация.

На графике представлены 3 параметра:

1. Загруженные страницы;
2. Исключенные страницы;
3. Страницы в поиске.

«Загруженные» — это страницы, которые уже находятся в базе поисковой системы. Не обязательно, что такая страница будет находится в поиске.

«Исключенные» — это страницы, которые не были допущены к поиску. Причины этому могут быть разные. К примеру, ответ 404, некачественное содержимое, дубликаты URL и подобные.

«В поиске» — это самый важный для нас параметр. Именно он показывает сколько страниц в данный момент присутствует в поиске.

Как посмотреть, есть ли страницы в индексе?

Способ 1. Если страниц на сайте не много, то это можно сделать вручную в разделе «Статистика обхода» -> «Страницы в поиске«. Тут представлен полный список того, что присутствует в поиске.

Способ 2. При помощи сервиса «Проверить статус URL«. Он так же находится в Вебмастере в разделе «Индексирование«. Проверка займет небольшое количество времени, но по ее итогам Вы получите достаточно исчерпывающую информацию о странице.
Статус может быть самым разным, к примеру:

Способ 3. При помощи инструкции «site:«. Данная инструкция поддерживается большинством популярных поисковых систем. Ее синтаксис очень прост

Необходимо прописать «site:» и сразу после URL.
Обратите внимание, что пробел после двоеточия не ставится!

По итогам ввода Вам будут показаны все материалы с данного ресурса. Чуть ниже кнопки «Найти» указывается число страниц, а левее в выдаче присутствуют все их сниппеты.

Способ 4

При помощи ввода отрывка текста со страницы. Если ввести в поисковую строку целый абзац (до 40 слов), то на первом месте будет именно Ваша страница. Если она конечно находится в поиске.

Обязательно проверьте, что бы в поиске был представлен нужны вам URL, а не сторонняя ссылка с Вашего домена. При необходимости возможно заключить фразу в двойные кавычки, это позволит искать строго по введенному запросу.

Проанализируйте оптимизацию

Кроме пунктов из предыдущих разделов, в рамках быстрого самостоятельного SEO-аудита нужно сосредоточиться на самых важных элементах оптимизации, которые могут повлиять на отношение поисковиков и органический трафик.

Проверить оптимизацию страницы:

1. Title .
   Релевантный заголовок с ключом, отображается в сниппете выдачи и на вкладке, не дублируется. Рекомендуемый размер — 70-80 знаков.
2. H1 заголовок.
   Релевантный заголовок страницы с ключом, должен быть в единственном варианте.
3. H2-H3 заголовки.
   Содержат релевантные ключи, раскрывают тему.
4. Descriptions.
   Описание, используется в сниппете, содержит ключи и поясняет содержимое.
5. Редиректы .
   Не используйте тег «meta refresh», а также не рекомендуют использовать ссылки с 301 редиректом, поскольку Google может не проиндексировать конечный URL.
6. Сканирование страниц и индексация.
   Важные страницы открыты для индексации в
   robots.txt и указаны в карте сайта.
7. Внутренняя перелинковка.
   Важные страницы имею минимальный уровень вложенности, перелинкованы с главной и другими авторитетными страницами сайта.
8. Высокая скорость загрузки.
   Сервер быстро
   обрабатывает запрос, все JS-элементы и стили загружаются в течение 5 секунд, пользователь видит загрузку уже спустя пару секунд после перехода.
9. Корректная кодировка.
   Кодировка, которую отправляет сервер, совпадает с кодировкой сайта. Информация о ней есть в строке «Content-Type: text/html; charset=utf-8»
   ответа сервера, где «utf-8» — указание кодировки. В исходном коде страницы должна быть такая же: . Укажите эту строку в шаблоне сайте в теге «head».

Вы можете проверить эти пункты вручную, но для экономии времени можно использовать автоматический инструмент. Сервис «Анализ сайта» от PR-CY умеет
анализировать внутренние страницы ресурса по самым важным параметрам. 

Раздел с анализом внутренних страниц сайта находится в левом меню под Расширенным анализом. В настройках есть режимы анализа с задержкой между запросами, с учетом robots.txt и без него.

Анализ всех страниц

Сервис оценивает коды ответов сервера, мета-теги, оптимизацию контента и технические характеристики, дает пояснения и советы к каждому пункту.

Фрагмент анализа внутренних страниц

Сервис проанализирует страницы пакетом в указанном количестве и отдельно покажет статистику с выбранными фильтрами по каждой.

Фрагмент анализа по каждой странице

Вы можете установить нужные фильтры из обширного списка и найти те страницы, в которых есть, к примеру, неуникальный Title или Description с конкретным ключом.

Фрагмент анализа с фильтром

Результаты можно скачать в табличке формата XLS, в ней будет сборная информация по каждой странице.

Фрагмент анализа в таблице XLS

После всех этапов быстрого аудита у вас будет список главных ошибок, которые влияют на органический трафик и сканирование сайта поисковиками.

Анализ множества страниц позволит выявить массу реальных проблем, которые мешают получать больше трафика и занимать более высокие места в поисковых системах. Причем выявить главные проблемы можно за несколько минут, их исправление уже намного улучшит состояние ресурса. А с помощью автоматических инструментов это будет еще проще и быстрее выполнить.

Различия индексации сайта в Google и «Яндексе»

Основное различие поисковых систем «Гугл» и «Яндекс» заключается в региональной принадлежности. Если Yandex работает только в русскоязычной части Интернета, то Google является международным поисковиком. Свои системы поиска есть практически в каждой стране. В некоторых случаях региональные сервисы могут составлять серьезную конкуренцию «Гуглу» («Яндекс» в РФ, Seznam – в Чехии, Baidu – в КНР и т. д.). Подтверждением этого факта могут служить переговоры по вопросам выкупа сервиса Yandex компанией «Гугл», которые имели место в 2003 году. Пока такое поглощение не состоялось.

У каждой поисковой системы есть свои программы ботов, осуществляющие проверку сайтов на предмет релевантности и качества представленного на них контента. При этом стандарты работы таких роботов постоянно совершенствуются. Нужно отметить, что разработчики не открывают полностью суть алгоритмов индексации, поэтому специалисты постоянно анализируют поисковые программы и на основании имеющихся практических данных формируют определенные выводы.

Рекомендуемые статьи по данной теме:

• Внутренняя оптимизация сайта: пошаговый разбор
• Проверка robots.txt: типичные ошибки и их устранение
• Редирект с http на https: повышаем безопасность сайта

Требования, которые предъявляют «Гугл» и «Яндекс» к индексации сайтов, имеют много общего. Поэтому можно сформулировать некоторые универсальные рекомендации:

Нужно уделять больше внимание качеству контента (уникальность, полезность и грамотность)

Программные и орфографические ошибки четко отслеживаются ботами и снижают индекс авторитетности сайта.
Интернет-площадки должны иметь понятную структуру
Важно, чтобы они были удобными для пользователей и содержали важную и ценную информацию.
Следует качественно проработать страницы контактов и обратной связи, разместить портфолио и отзывы, а также описать имеющиеся достижения.
На сайте нужно разместить работающие исходящие ссылки.
Контент на интернет-площадках должен постоянно обновляться, а их функционал следует дорабатывать с учетом различных нововведений и инноваций. Все это учитывается поисковиками при ранжировании сайтов.

Поисковая система «Яндекса» имеет два робота – основной и быстрый (Orange). Первый осуществляет индексацию Сети в целом, а второй обеспечивает возможность быстрого поиска наиболее свежей и актуальной информации по запросу пользователя. Каждый робот имеет перечень данных, которые необходимо проиндексировать.

По мнению экспертов, «Яндекс» работает медленнее, чем «Гугл». Но при этом поисковая система Рунета индексирует полезные материалы и исключает из выдачи «лишние» результаты.

Преимущество «Гугла» заключается в его универсальности. «Яндекс» же развивается исключительно в русскоязычном Интернете (попытки выйти на другие рынки имели место, но пока не увенчались успехом).

Система Yandex ориентирована на поиск по запросам из ограниченного перечня регионов. Но именно региональный характер во многом определяет его успешность. В настоящее время «Гугл» и «Яндекс» занимают в русскоязычном Интернете примерно одинаковые ниши.

В интернет-пространстве других стран поисковая система Yandex не получила распространение, так как наиболее значимыми факторами поиска там выступают язык и местонахождение пользователя. На основании этих критериев и строится поисковая выдача «Гугла». В системе «Яндекс» индексация по языковым признакам не происходит. Несмотря на то, что этот поисковик определяет место нахождения пользователя, он не учитывает этот фактор при обработке запроса. Классифицировать сайты Рунета по регионам в зависимости от языка запроса не получается. «Яндекс» может настраивать поисковую выдачу исключительно по территориальному признаку, в чем и заключается уникальность этой системы.

Не так давно Yandex запустил новый инструмент – поиск «Андромеда». После этого поисковик предлагает определенные места в городах, дает возможность собирать коллекции пользователя, информирует о событиях из мира спорта, отмечает статус интернет-ресурсов особыми значками в зависимости от их благонадежности и популярности. Каким образом новый инструмент может влиять на индексацию, еще не совсем ясно.

Важным нововведением 2018 года является замена показателя ТИЦ (индекс цитирования) на ИКС (индекс качества сайта). Новый показатель необходимо учитывать при продвижении ресурса.

Индексация сайта в Google и Яндекс

Принципы индексации у этих поисковых систем преимущественно одинаковые: краулинг → очистка → индексация → ранжирование. Но различия можно найти, поэтому расскажем о тех, которые известны.

Индексация в Google

Самое главное отличие — Google лучше ориентируется в англоязычном сегменте, то есть лучше воспринимает текст и запрос пользователя на английском. Разница на момент 2020, думается, незначительная, но учитывать стоит.

У Гугла 2 основных типа роботов: для мобильных сайтов и для десктопных. Новые сайты индексируются мобильными роботами и приоритет отдан мобильным версиям сайта, согласно алгоритму mobile-first индекс. 

Скорость индексации обычно выше, чем у Яндекса: на 1 страницу уходит неделя или меньше. Индекс обновляется постоянно, а некачественные страницы не удаляются из него, но при этом и не показываются пользователям.

Индексация в Яндексе

У Яндекса тоже 2 типа роботов: основной и быстрый (Orange). Основной робот занимается индексацией всего интернета, а быстрый отвечает за поиск самых свежих документов, чтобы информация была доступна как можно быстрее (от нескольких минут до пары секунд).

Обновление индекса происходит раз в несколько дней ночью, когда нагрузки на серверы меньше. Процесс индексирования сайта обычно занимает от недели до месяца, а некачественные страницы удаляются из индекса.

Как проверить индексацию?

Уточним сразу пару моментов. Индексацию нужно проверять как в Google, так и в Яндексе. Более того, вы должны знать изначальное количество страниц на сайте. Это можно сделать с помощью краулеров типа Xenu, Screaming Frog, Netpeak Spider и других.

Как проверить индексацию:

1. Инструменты Яндекс Вебмастер и Google Search Console. В Вебмастере это Индексирование → Страницы поиска (отдельные страницы смотрите в инструменте «Проверить статус URL»). В Search Console откройте отчёт Покрытие → Страницы без ошибок (индексацию отдельных страниц ищите в Проверке URL).  
2. Используйте оператор site. В поисковой строке Яндекса и Google введите site:name.com, где name — домен сайта. Под строкой поиска справа будет указано количество проиндексированных страниц. Если разница в количестве больше 10%, у вас проблемы с индексацией.
3. RDS Bar и другие сервисы. RDS Bar — это бесплатный плагин для браузера. В нём вы узнаете не только количество проиндексированных страниц, но и получите другую полезную информацию. Также автор статьи советует воспользоваться сервисом a.pr-cy. Он позволяет провести хороший первичный аудит сайта и уже в самом начале выявить основные проблемы.

Почему проект не индексируется

Мы подробно рассмотрели, что такое индексация сайта, для чего она нужна, какую играет роль. Мы узнали, как проводится проверка индексации сайта в Яндексе и Google. Теперь нужно понять, почему страницы ресурса могут не попасть в базу поисковых систем. Тут возможно несколько вариантов развития событий.

Во-первых, ошибка 404. Распространенная проблема, когда страница недоступна. Следовательно, поисковый робот не может ее найти, проанализировать и добавить в базу. И проверка индексации страниц сайта не даст желаемый результат. Это может случиться из-за отсутствия самой страницы, неправильного адреса или блокировки скриптом. Необходимо проверить весь проект на предмет ошибок, проанализировать работу скриптов. Многие из них отправляют сообщение о результате проверки, что поможет выявить проблему и устранить ее. После исправления ошибок стоит повторно проверить индексацию сайта.

Во-вторых, спам или переоптимизация. Здесь подразумевается манипуляция пользователями и поисковыми системами с целью привлечь трафик на ресурс. Здесь могут быть использованы различные подходы, например, добавление большого количества ключевых слов в заголовок и текст страницы, маскирование ключевых слов при помощи цвета фона или мелкого шрифта и так далее. Визуально страница может выглядеть нормально (для пользователя), но в глазах поискового робота она будет избыточно нагружена ключевыми словами. Результат — неудачная проверка сайта в поисковых системах.

Использовать подобные сомнительные способы продвижения не стоит, поскольку сегодня поисковики могут успешно определять спам и переоптимизацию, что наказывается фильтрами и баном всего проекта. Подобные подходы могут привести и к снижению позиций в поисковой выдаче, что негативно скажется на общем состоянии сайта. Мгновенное перенаправление на другую страницу (длительность перенаправления равна 0 секунд) тоже может закончиться исключением из списка выдачи.

Помните, что поисковики служат для пользователей. Они предоставляют им сайты с информацией, которая максимально релевантна их запросам, то есть соответствует тому, что они ищут. Задача оптимизатора — создать такой контент, который легко ищется поисковиком и предоставляется пользователю. И своевременная проверка индексации сайта в Гугле и Яндексе имеет здесь весомое значение.

В-третьих, ошибки в датах. Поисковики умеют сортировать загружаемые данные по датам, однако это не всегда происходит верно. По этим причинам нужно не только правильно отображать данные о времени публикации в HTML документе, но и поработать с настройками вебсервера. Будет хорошим тоном настроить систему так, чтобы при передаче запросов указывались временные данные, что позволит исключить возможные неприятности. В этом случае проверка индексации сайтов покажет положительный результат.

В-четвертых, проблемы с кодировок. Очень частая и крайне неприятная ситуация. Если в HTML документе неправильно указана кодировка текстов (или ее там вовсе нет), то на выходе поисковый робот может загрузить не полноценный текстовый материал, а набор символов. Особенно это актуально при работе с документами не на английском языке (русский, украинский и пр.). Соответствующие правки можно внести в мета-тег «Content-type». Это поможет обезопасить себя и сделать посещение сайта комфортным для пользователей.

Если проект содержит одинаковые страницы, но с разным языковым наполнением, то тут стоит осуществлять передачу кодировок в разных robots.txt на разных портах (серверах). Если передача проходит по директориям, то достаточно одного robots с соответствующими записями. После внесения изменений не забудьте проверить индексацию сайта в Google и Yandex.

В-пятых, загрузка одного веб-сайта с разных серверов. Эта проблема актуальна при наличии зеркал или mirror. Под ними понимают разные доменные адреса, ведущие на один и тот же сайт. В результате может случиться так, что поисковый бот проиндексирует один из вариантов, а другой документ исключит (а ведь это может быть не зеркало, а основной ресурс). Здесь поможет внесение записей в файл robots.txt.

Стоит поговорить и о том, сколько индексируется сайт в Яндексе или в Google. Длительность процедуры нигде не установлена и может составлять как один день, так и несколько недель. На это влияет ряд факторов:

• возраст сайта;
• состояние внутренней оптимизации (перелинковка);
• наличие ошибок на сайте;
• скорость загрузки страниц;
• количество и качество контента.

Возможные проблемы с индексацией

Разного рода ошибки и угрозы могут отрицательно сказаться на индексации сайта, вплоть до бана.

Иногда поисковые системы устанавливают запрет на обход сайтов.

Чтобы избежать санкций, регулярно уточняйте наличие проблем.

Яндекс.Вебмастер имеет целый раздел Диагностика, в котором подробно расписаны несколько видов угроз по степени влияния:

• Фатальные проблемы;
• Критичные проблемы;
• Возможные проблемы;
• Рекомендации.

Для всех расписаны критерии оценки и подсказки по устранению.

В подразделе Безопасность и нарушения отображаются проблемы, связанные с вирусами и вредоносным кодом.

Система покажет, откуда сайт получил заражение и что именно следует исправить. После исправления вы можете запустить переобход страниц.

Сквозная аналитика

 от 990 рублей в месяц

• Автоматически собирайте данные с рекламных площадок, сервисов и CRM в удобные отчеты
• Анализируйте воронку продаж от показов до ROI
• Настройте интеграции c CRM и другими сервисами: более 50 готовых решений
• Оптимизируйте свой маркетинг с помощью подробных отчетов: дашборды, графики, диаграммы
• Кастомизируйте таблицы, добавляйте свои метрики. Стройте отчеты моментально за любые периоды

Узнать подробнее

Проверка индексации страниц сайта через поиск

Термином «индексация сайта» обозначают добавление ресурса или его материалов в базу данных поисковой системы. То есть, если страницы сайта проиндексированы, то при введении поискового запроса они окажутся в общей выдаче. Это именно то, чего добиваются вебмастера – чтобы материалы Интернет-ресурсов как можно быстрее оказались проиндексированы.

Чтобы быть уверенными в том, добавлен ли сайт в поисковую базу, выполняется проверка индексации сайта в Яндексе, Гугле и других поисковых системах. Эту проверку можно выполнять как ручным способом, так и автоматически.

Рассмотрим, как проверить проиндексирован ли сайт, используя при этом поисковый запрос. Здесь возможно несколько вариантов:

1. Введение url конкретной страницы в поисковый запрос. Этот способ подойдет для тех страниц, которые проиндексированы не быстроботом Яндекса. В противном случае, страница может и не отобразиться, поэтому данный метод проверки малоэффективный.
2. Введение части текста в поисковый запрос. Метод действует только тогда, когда текст уникальный. Для этого необходимо выделить часть текста (10-20 слов) и ввести их в поиск. Однако, материал будет достаточно поздно отображаться в выдаче. Этот способ также не очень эффективный и хлопотный.
3. Использование расширенного поиска. Чтобы узнать, проиндексирован ли сайт в Яндексе, нужно ввести необходимый запрос в этом поисковике и выполнить поиск, после чего под строкой появится ссылка «Расширенный поиск». Что касается Гугла, то с ним немного дольше придется повозиться. После введения запроса с правой стороны появится знак шестеренки – «Настройки». Нужно нажать этот значок и в меню выбрать пункт «Расширенный поиск». Помимо Яндекса и Гугла другие ПС также располагают расширенным поиском. Итак, дальше нужно ввести фразу и домен, на котором нужно произвести поиск. В выдаче обычно самой первой должна появиться нужная статья. Это работает при условии, что материал уникальный. Можно пойти более быстрым путем и сразу вбить в расширенный поиск url страницы. Данный способ эффективный, но требует временных затрат. Следует учесть, что не всегда нужный адрес находится на первой позиции в поисковой выдаче. Иногда необходимо просмотреть всю первую страницу в выдаче, то есть, топ-10.

Есть проблемы с работой самого сайта или хостинга

Возможно, сайт не в индексе, потому что работает плохо. Например, его страницы очень медленно загружаются. Проверить это можно с помощью специальных сервисов — например, PageSpeed Insights.

Также следует обратить внимание на состояние HTML-разметки. Поисковые системы все еще лояльно относятся к ошибкам, но могут понижать приоритет сайта из-за кривой разметки

Например, нарушение вложенности тегов приводит к тому, что роботам тяжело разобрать содержимое страницы. Типичный пример:

<section><p>Текстовый фрагмент</section></p>

Проблемы также могут быть с индексацией JavaScript. Если контент создается динамически, то поисковым роботам сложно его просканировать. Поэтому предпочтительнее оставлять на странице статичный код, который хранится в HTML-файле на сервере.

Возможные причины отсутствия индексации сайта также следует искать на стороне сервера. Если из-за проблем с хостингом страницы часто недоступны, то поисковые роботы приходят все реже, а затем и вовсе начинают их игнорировать.