Как работает Яндекс.Вебмастер. Руководство для начинающих

Вебмастер — это сервис Яндекса, который показывает, как поисковик проиндексировал ваш сайт. Вебмастер позволяет: мониторить страницы, обнаруживать фатальные и критические ошибки, добавлять robots.txt , sitemap и другое. Все эти действия помогают повысить позиции сайта в поиске. 

В статье рассмотрим задачи и инструменты Яндекс.Вебмастера, которые вы можете использовать для SEO-продвижения вашего интернет-магазина.

Для чего нужен Яндекс Вебмастер

Для улучшения ранжирования в поиске нужно, чтобы поисковой робот правильно видел ваш сайт. Такие инструменты как Яндекс Вебмастер и Google Search Console отображают то, с какими характеристиками поисковики обнаружили ваши страницы. Если на сайте имеются ошибки — данный инструмент отобразит это. Поисковик в своем индексе учитывает каждую характеристику у обнаруженного сайта. Чем меньше ошибок обнаружил поисковой робот на вашем сайте, тем выше он поднимет его в выдаче. И наоборот: страница сайта окажется вне индекса или на самых низких позициях с большим количеством ошибок.

Подробная инструкция по работе с Google Search Console →

Итак, для того чтобы улучшить ранжирование сайта, поднять его в поисковиках до первых позиций, необходимо учитывать требования поисковых систем.

На данный момент учитывается огромное количество факторов при ранжировании сайтов. Некоторые из них как раз и можно проверить в Яндекс.Вебмастере. Например, учитывает ли поисковик внесенные изменения на сайте, как видит данную страницу, с каким ответом сервера: 200 ОК или 404. Яндекс Вебмастер также позволяет мониторить работоспособность сайта, дополнительно наблюдать за статистикой запросов.

Как добавить Яндекс.Вебмастер к сайту

Если у вас сайт с поддоменами, то каждый поддомен следует добавлять как отдельный сайт.

1. Зарегистрируйте почту на Яндексе или войдите в существующий аккаунт. Данную почту лучше не использовать в других целях.

2. Зайдите в Вебмастер по ссылке: https://webmaster.yandex.ru/welcome, нажмите кнопку «Перейти» → «Добавить сайт».

Вход в Яндекс.Вебмастер

3. Добавьте в строку адрес вашего сайта, к примеру: https://www.myshop.ru/.

Пример добавления адреса сайта в Вебмастер

4. Теперь нужно подтвердить права на сайт. Для этого Яндекс Вебмастер предлагает воспользоваться тремя способами на выбор: через HTML-файл, метатег или DNS-запись.

Варианты подтверждения прав на управление сайтом в Яндекс.Вебмастер

Инструкция: Как подтвердить сайт в Яндекс.Вебмастере, если ваш сайт на AdvantShop →

Основные инструменты Яндекс.Вебмастера

1. Сводка

В сводке отображены блоки с краткой информацией о состоянии сайта. Здесь следует обратить внимание на блок «Проблемы сайта».

Отображение проблем сайта в сводке

2. Диагностика

Проблемы сайта более подробно описываются во вкладке «Диагностика сайта». При мониторинге сосредоточьте внимание на наличие фатальных и критичных проблем сайта.

Фатальные проблемы — это ошибки, которые запрещают сайту попасть в поиск, соответственно, пользователи не смогут попасть на ваш сайт. 

Примеры ошибок:

1. Нарушения правил поисковой системы;

2. Сайт закрыт к индексации в robots.txt;

3. Главная страница отвечает ошибкой 404.

Информация о фатальных ошибках в Яндекс.Вебмастере

Критичные проблемы — это ошибки, которые серьезно влияют на видимость сайта,  понижая его в поисковой выдаче.

Пример ошибок:

1. Долгий ответ сервера;

2. Срок действия домена истекает в ближайшее время;

3. Низкое юзабилити сайта.

Информация о критичных ошибках в Яндекс.Вебмастере

Возможные проблемы — это мелкие недочеты, иногда владельцы сайтов намеренно оставляют их, однако устранение таких недочетов, часто приводит к повышению сайта в поиске.

Пример ошибок:

1. Нет используемых роботом файлов sitemap;

2. Ошибки в файлах sitemap;

3. Некорректно настроено отображение несуществующих файлов и страниц.

Информация о возможных ошибках в Яндекс.Вебмастере

Нарушения и угрозы безопасности

Данный блок показывает попал ли ваш сайт под такие фильтры Яндекса, как: АГС, Минусинск, Баден-Баден.

Причины санкций:

1. Некачественные ссылки с сайтов, рассылающие спам;

2. Вирусы — безопасность сайта для пользователей превыше всего;

3. Некачественный сайт.

Некачественными сайтами считаются:

• Сайты-дорвеи — инструмент черного SEO, сайт, созданный для перенаправления пользователей на другой интернет-ресурс.

• Сайты с избытком рекламы. 

• Сайты с ворованным контентом.

• Сайты с нелегальным контентом. 

• Мошеннические сайты. 

3. Качество сайта

Показатели качества

Показывает ИКС вашего сайта и сравнивает его с ИКС сайтов конкурентов.

ИКС (индекс качества сайта) — это показатель, оценивающий удовлетворенность пользователей вашим сайтом. Высокий показатель говорит о том, что ваш контент полезен и популярен у пользователей.

Отзывы

В данной категории отображаются комментарии пользователей о вашей компании. Чтобы видеть их, нужно иметь доступ к Яндекс.Бизнесу, к которому привязан ваш сайт.

4. Поисковые запросы

Данная категория дает возможность посмотреть запросы, по которым виден ваш сайт. Эти запросы вы можете выгрузить и дальше работать с файлом, используя его, например, для расширения семантического ядра.

Отображение категории Поисковые запросы в меню Вебмастера

В данной категории первые два пункта наиболее важные: статистика запросов и статистика страниц.

Начнем со статистики запросов - здесь показывают ваш трафик сайта по запросам: сколько показов, кликов было на вашем сайте, автоматически рассчитанный CTR и др.

В статистике по страницам вы увидите, какие страницы наиболее популярны у пользователей.

Пример статистики поисковых запросов

5. Индексирование

Это стратегически важная часть в мониторинге вашего сайта.

Статистика обхода

Тут отображается перечень ссылок, которые обошел поисковой робот Яндекса с полученным ответом сервера 200, 301 или 404 и др.

Обратите внимание на следующие коды ответов сервера:

• 200 ОК — все хорошо, ваша страница прочитана и попадает в индекс.

• 300 — редирект, перенаправляет на другую страницу.

• 404 — ошибка, данная страница не попадет в индекс Яндекса.

Страницы в поиске

Это страницы, которые прошли в индекс. Здесь подробно описана каждая страница, с присущими ей характеристиками. Данную категорию следует регулярно просматривать, чтобы быстро обнаруживать мусорные страницы на сайте: дубли, 404 ошибки и т.д.

Пример информации в категории Страницы в поиске

Разберем подробнее таблицу со страницами в поиске:

• Статус и URL.

URL с плюсом — это добавление страницы в индекс.

URL с минусом — это удаление страницы из индекса.

Ниже под URL пишутся определенные характеристики страницы, такие как:

1. редирект;

2. дубль;

3. каноническое/неканоническое;

4. запрет в robots.txt;

5. ошибка 404;

6. статус неизвестен;

7. малоценная или мало востребованная страница и др.

Большинство из данных параметров являются ошибками, которые необходимо будет исправить.

• Обновление

День, когда обновилась информация по данной странице в поиске, принялось какое-то решение по ней. То есть все это время робот ее изучал и наконец выдал ответ.

• Последнее посещение

День, когда поисковой робот обошел страницу.

• Заголовок

Title страницы, который отображается в поисковой выдаче.

Структура сайта

Отображается, если на сайте больше 10 страниц.

Проверить статус URL

Проверяйте страницы на нахождение в поиске с помощью данного инструмента. Здесь будут отображены ошибки из-за которых страницу не добавили в поиск.

Пример проверки URL

Мониторинг важных страниц

Отслеживайте работоспособность ваших страниц. Закрепите страницы, которые наиболее стратегически важны для продвижения, нажав кнопку «Отслеживать».

Пункты таблицы мониторинга важных страниц

Разберем на примере, что значит каждый пункт из таблицы:

Последнее изменение — 27 января, когда внесли изменения на странице.

Дата обхода — 28 января. Узнаем когда проиндексировалось изменение или еще не проиндексировалось.

Версия — от 25 января. Означает, что изменения не вступили в силу. В поиске используется старая версия страницы.

Переобход страниц 

Позволяет в приоритете дать роботу новые или измененные страницы для индексации. Если вы добавили/ изменили страницу без использования данного инструмента, страница попадется роботу в течение двух недель, и только тогда попадет в индекс.

Если же вы использовали этот инструмент, робот Яндекса обойдет эту страницу вне очереди в ближайшее время.

Файлы sitemap

Добавьте в Вебмастер карту сайта, для того чтобы в дальнейшем поисковому роботу было проще считывать ваш сайт.

Пример отображения файлов Sitemap в Вебмастере

Переезд сайта

Когда переезжаете на https, указываете нужный протокол, к примеру https. Сохраняете, чтобы браузер понимал какое главное зеркало использовать для вашего сайта.

Скорость обхода

Выбирая настройки «Доверять Яндексу», робот будет загружать наибольшее количество страниц без лишней нагрузки на сервер. Рекомендуем оставить этот вариант по умолчанию.

Пример настройки скорости обхода в Вебмастере

Задать скорость обхода вручную может понадобиться, если на вашем сайте вы заметите большое количество обращений робота к серверу. Из-за перегрузки сервера скорость загрузки страниц может упасть. В этом случае вам может понадобиться снижение скорости обхода. Для этого обратитесь к следующей инструкции.

Заголовки и описания 

Показывает страницы с одинаковыми title и description. Дублей title и description не должно быть, поэтому также эти ошибки надо исправлять.

6. Представление в поиске

Сниппеты и ответы, источники данных о товарах и предложениях — в этих разделах вы найдете рекомендации по улучшению сайта. Яндекс рассказывает, какие возможности можно использовать для усовершенствования сайта.

Пример представления в поиске

Быстрые ссылки. Формируются Яндексом автоматически и зависят от многих факторов (возраст, трастовость сайта и др.), повлиять на это можно только косвенно.

Регистр имени сайта. Можно поменять для удобства пользователей, но не любое имя Яндекс одобрит к изменению, следует будет учитывать следующие требования.

Настройка регистра имени сайта

Региональность. Следует обязательно добавить, если ваш сайт коммерческий и продвигается на какой-то определенный регион.

7. Ссылки

Внутренние — просматриваем есть ли неработающие ссылки внутри сайта.

Внешние — мониторим появление/ удаление ссылки с других сайтов и исправляем неработающие.

8. Турбо-страницы

Турбо-страницы в меню Вебмастера

Турбо-страницы — это создание с помощью Яндекса легких версий страниц сайта. Этот механизм позволяет увеличить скорость загрузки страниц, даже для пользователей с медленным и нестабильным интернетом.

Обычно устанавливают турбо страницы с помощью программистов, но если ваш интернет-магазин на платформе AdvantShop, то с помощью модуля, можно намного проще справиться с этой задачей.

9. Инструменты

Анализ robots.txt 

Состоит из 3 блоков:

1 блок. Проверяет правильно ли у вас создан файл.

2 блок. Отображает ваш текущий файл.

3 блок. Если внедрили какие-то изменения, добавили какие-то команды в файл.

Здесь можно проверить, какие ссылки закрыты или открыты для индексации: 

- директива Allow разрешает индексировать те или иные разделы или страницы сайта;

- директива Disallow запрещает к индексированию определенные разделы или страницы сайта.

Анализ файлов sitemap 

В этой настройке проверяется содержимое карты сайта, в файле sitemap. Файл упрощает работу поисковому роботу с многостраничными сайтами глубокой вложенности. При наличии у сайта правильной структуры большее количество страниц окажется в индексе. Поэтому важно вовремя сообщать поисковой системе о действующей структуре сайта. 

Проверка ответа сервера

Показывает какой код ответа сервера у данной страницы.

Пример проверки ответа сервера в Яндекс.Вебмастере

Удаление страниц из поиска

Инструмент для принудительного удаления страниц из индексации. К примеру, если закрыть файл от индексации в robots.txt, то страница удалится из индекса спустя некоторое время.

Проверка мобильных страниц 

Эта опция нужна для выявления ошибок по мобильной верстке сайта.

Пример результатов проверки мобильных страниц

10. Настройки

Уведомления в меню Яндекс.Вебмастера

В данном разделе контролируете:

- какие уведомления хотите получать; 

- передаете сотрудникам или партнерам права доступа на мониторинг сайта; 

- связываете два сервиса: Яндекс.Вебмастер и Яндекс.Метрику; 

- добавляете иконку ИКС на сайт.

Итог

Для корректной работы вашего сайта достаточно будет проверять показатели по критическим и фатальным проблемам сайта, мониторить статистику обхода и страницы в поиске два раза в неделю. Если на постоянной основе проверять сайт через Вебмастер и исправлять ошибки, то ваши шансы попасть в ТОП-10 поисковой выдачи будут значительно выше.