Команда Яндекс.Поиска сообщила об обновлении раздела «Исключенные страницы» в Яндекс.Вебмастере. Все причины исключения страниц разделены на три группы:
Ошибки на стороне сервера или сайта. На эту группу владельцам сайта стоит обратить внимание в первую очередь и постараться устранить причину возникновения этих ошибок. Страницы запрещены к индексированию вебмастером или не существуют. В этом разделе показывается информация об удаленных и более не существующих на сайте страницах, о страницах, запрещенных в robots.txt, неканонических страницах и т.д. Ничего исправлять здесь нет необходимости. Не поддерживается роботом. Сюда попадают страницы с неподдерживаемым форматом, языком и т.п. Вебмастеру на это также надо обратить внимание.
Такое разделение поможет лучше понять, что необходимо исправить, а что в исправлении не нуждается. Если какая-то причина исключения для определенного сайта не является ошибкой, вебмастер всегда может самостоятельно внести изменения в разделе «Настройки», выбрав «Исключенные страницы».