Bing повысили эффективность Bingbot

Bing повысили эффективность Bingbot
23 Октября 2018

Bing усовершенствовали своего поискового робота Bingbot и повысили его индексационные возможности.

Многие привыкли думать, что Bingbot во всём идентичен Googlebot, ведь основная его задача — находить в интернете новый или обновлённый контент и добавлять его в индекс Bing.

По сути, это так, но есть один минус: многие вебмастера жалуются на то, что робот Bingbot недостаточно часто занимается поиском контента, а значит, результаты в выдаче Bing не так актуальны, как хотелось бы.

С другой стороны, есть владельцы сайтов, которые считают, что Bingbot находит новые страницы слишком часто, и ресурсы просто не могут соответствовать такой скорости работы робота. Интересно, но обе стороны правы.

У Bingbot были очевидные технические проблемы, и некоторое время назад представители Bing признали это, добавив, что делают всё возможное, чтобы их разрешить.

Улучшение производительности Bingbot

Главной задачей компании было настроить оптимальную скорость поиска и индексации сайтов для Bingbot, чтобы новый контент своевременно попадал в выдачу поисковой системы.

Помимо этого, Bingbot должен научиться работать с каждым сайтом индивидуально. Дело в том, что некоторые вебмастера продвигают свои сайты и довольно часто обновляют его содержимое, и им нужна ежедневная индексация. Другие делают это гораздо реже, поэтому им бы хотелось, чтобы поисковый робот сканировал их ресурс только тогда, когда на нём появляются новые URL или добавляется новый контент.

Нам нужно было решить очень важный вопрос и сделать так, чтобы алгоритмы Bingbot работали в зависимости от пожеланий каждого отдельного вебмастера и рассматривали частоту обновления контента на каждом отдельном сайте”.

Оценка текущей работы Bingbot и повышение эффективности индексации

Bing оценили возможности Bingbot с помощью метрики crawl efficiency, которая показывает частоту поиска и индексации нового контента на каждой найденной странице.

В идеале, Bingbot должен обнаруживать URL только в случаях, когда контент впервые появился в интернете, или когда он был обновлён.

Показатели по данной метрике будут ухудшаться, если Bingbot проиндексирует дублирующийся и/или не изменившийся контент.

Что это означает для владельцев сайтов

Bing сообщили о том, что эффективность работы Bingbot повысилась за последние несколько месяцев. Это говорит о том, что seo-оптимизаторам, при продвижении сайтов лучше регулярно обновлять свой контент, чтобы повышать показатель crawl efficiency. Вдобавок, если на ресурсе присутствует дублирующийся контент, то лучше избавиться от него как можно скорее.