Технология поиска MSN
MSN использует Inktomi и Direct Hit, это означает, что в определении релеватности используется расположение ключевых слов и слова в ссылках, ведущих на страницу, а также click popularity (популярность страницы). Чтобы узнать более подробно об алгоритмах ранжирования читайте описания
Inktomi и
Direct Hit.
User Agent поискового робота (имя паука)
MSN использует поисковую систему Inktomi, имя ее паука: Slurp
Информация в лог файлах
Посещение вашей страницы поисковым роботом Inktomi может говорить о том, что в скором времени ваш сайт появится в категории MSN's Web Sites. Но опять же, нет никакого способа узнать какую часть Inktomi использует MSN. Если вы анализируете свои лог файлы с помощью Блокота (Notepad), то вам понадобятся IP Slurp'а. Их вы можете получить на searchengineworld:
IP поисковых роботов.
Глубина индексации
Теоретически паук по ссылка должен проиндексировать весь сайт, но часто пауки поисковых систем индексируют страницы в глубину до какого-то уровня.
Например:
|
страница 1
|
страница 2
|
|
www.abcxyz.com/abc/alphabet.html
|
www.abcxyz.com/abc/def/xyz/new/old/alphabet.html
|
Т.к. Страница 1 находится на глбине 1 каталога, Страница 2 на глубине 5 каталогов, то большая часть поисковых пауков предпочтет проиндексировать Страницу 1, нежели Страницу 2.
Поисковый робот Inktomi, используемый MSN, вообще можно отнести к роботам, которые достаточно глубоко индексируют. Но на самом деле, редко индексируются страницы глубже 3-го уровня.