С помощью сервиса Яндекс.Вебмастер вы можете провести диагностику сайта и выявить проблемы, которые влияют на качество и скорость индексации проекта. В данной статье мы перечислим возможные ошибки и расскажем как их решить.
Robots.txt отвечает за настройки индексирования ресурса. Он подсказывает поисковику какие страницы и разделы можно включать в индекс, а какие нельзя. Если поисковый алгоритм Яндекса при очередном обходе сервера не смог обнаружить файл robots, в панели вебмастера появится уведомление о соответствующей ошибке.
Иногда проблема может появиться случайно. Если вы уверены, что файл robots.txt на сайте есть, вы можете провести проверку доступности файла вручную. Для этого перейдите по данной ссылке и укажите адрес вашего сайта.
Если файл всё ещё недоступен, его необходимо создать и загрузить в корневую директорию вашего проекта. Подробнее о том как это сделать читайте в статье “Анализ, использование и директивы файла robots.txt”.
Документ “роботс” состоит из специальных записей (директив). Если такие записи указаны неверно, в панели вебмастера Яндекс появится соответствующее уведомление.
Чтобы решить проблему, необходимо устранить все возможные ошибки в содержании файла. Для этого рекомендуем прочитать статью “Анализ, использование и директивы файла robots.txt”.
Sitemap – это текстовый документ, в котором указываются все страницы ресурса. Проще говоря – это карта сайта. По ней поисковый робот отслеживает изменения и загружает в поиск новые страницы.
Если на вашем сервере отсутствует файл Sitemap, в панели вебмастера появится уведомление о возможной проблеме. Чтобы устранить ошибку, создайте и загрузите карту на сервере. Сделать это можно двумя способами: вручную или с помощью встроенного инструмента в панели вебмастера.
Проведите анализ файлов Sitemap по данной ссылке. Если содержание документа не соответствует стандартам Яндекса, вы увидите уведомление “Неизвестный тег”.
Данная ошибка не создаёт большой угрозы для проекта. Поисковая система будет просто игнорировать неизвестные теги и сканировать другие элементы. Поэтому вносить изменения в файл не обязательно.
Подробнее о возможных причинах, из-за которых могут появиться проблемы с картой сайта, читайте в статьях:
Мета-теги используются в процессе ранжирования. По ним поисковая система определяет соответствие ресурса запросу пользователя. Также с их помощью формируется описание страниц в поисковой выдаче. В частности, title – это заголовок страницы. В свою очередь, из содержимого description может формироваться сниппет (краткое описание под заголовком).
Чтобы устранить ошибку, необходимо добавить данные элементы в код HTML всех страниц. Однако делать это нужно с умом, так как содержание мета-тегов имеет большое влияние на ранжирование ресурса. Подробнее о том как настроить семантические теги читайте в статье: “Внутренний анализ основных мета-тегов сайта”.
