Google официально объявил об отказе от использования робота, индексирующего новостной контент. С 25 августа Googlebot-News уходит на пенсию, а сам поисковик возвращается к используемой ранее практике общей индексации ресурсов (в т.ч. и новостных) с помощью алгоритма Googlebot.
Данное изменение, по утверждению команды Googl’а не должно беспокоить издателей. Любой, кто не желает индексации Googlebot’ом своего новостного контента, может закрыть его все тем же файлом robot.txt или с помощью метатега robots.Googlebot.
Робот обязательно учтет этот запрет и, соответственно, пропустит мимо своего и пользователей внимания. Кроме того, издателям по-прежнему предоставляется услуга об обнаружении записей, указывающих ошибки страниц индексации отдельно по новостям. Для этого в Google webmaster tools, как и ранее, можно воспользоваться специальным сервисом.
Эксперты разошлись во мнениях по поводу целесообразности отказа от раздельной индексации новостного и общего контента. В своем большинстве, они называют данный шаг неоправданным откатом в прошлое.