Новый краулер для Microsoft Live Search.

В начале 2008 года веб-проект Microsoft Live Search претерпел очередное обновление, которое непосредственно касалось поискового робота, так называемого, Краулера. Это должно было намного повысить эффективность работы веб-проекта крунейшей корпорации Microsoft. В связи с этим, с того момента программа стала намного лучше индексировать и обходить веб-ресурсы. Руководство корпорации Microsoft говорили о том, что они старались для облегчения применения программы веб-мастерами и оптимизаторами.

Для этого применялись самые последние технологии, которые были разработаны сотрудниками компании. Так вот, с того момента были добавлены новые возможности и функции. Например, Conditional Get предоставляет возможность поддерживать условный GET-запрос. То есть, веб-страница открывается только после обхода краулером. Последний помечает страницы особыми обозначениями с указанием последнего обхода страницы. Если страница не изменялась, то отображается сообщение «304 Not Modified».

Кроме этого, предусматривается сжатие передаваемой информации. Это намного снижает потребление трафика и времени.

По информации новостного портала seonews.ru.

списибо за то что прочли статьи Новый краулер для Microsoft Live Search.