Релевантность поиска и поисковые запросы

Каждому элементу характеристического множества назначается вес. Релевантность равна взвешенной сумме элементов характеристического множества запроса. Если веса элементов характеристического множества одинаковы, то в этом частном случае средняя релевантность равна среднему арифметическому от элементов характеристического множества запроса.

Пример. Задан следующий набор весов элементов характеристического множества запроса: (5, 4, 3, 2, 1). Запрос имеет характеристическое множество (0.8, 0.5, 0.46, 0.43, 0.4).

Тогда средняя релевантность равна:

0.8*5/15 + 0.5*4/15 + 0.46*3/15 + 0.43*2/15 + 0.4*1/15 = 0.267 + 0.133 + 0.092 + 0.057 + 0.027 = 0.576.

4.6. Вычисление средней релевантности поиска по всем запросам

Средняя релевантность по всем запросам является единой характеристикой технической эффективности поисковой машина, определяется как среднее арифметическое от значений релевантности поиска по отдельным запросам. Чем больше средняя релевантность, тем выше техническая эффективность поисковой машины.

5. Рекомендуемые размеры и веса элементов

Мы рекомендуем взять пять элементов – значения точности поиска для первых 10, 30, 50, 70, 100 документов, найденных по запросу, и назначить следующие веса элементов: (5,4,3, 2, 1), как в приведённых выше примерах.

6. Множество тестовых запросов
В данном множестве приведено 100 запросов, наиболее часто поступавших на поисковую машину Рамблер по состоянию на май 2000 г. Отбор запросов проводился в соответствии с подходом, изложенным в п. 4.1 настоящего документа. При этом запросы с ненормативной лексикой не учитывались.
Ниже приводятся тестовые запросы, сгруппированные по количеству содержащихся в них слов.

6.1. Запросы из одного слова

1) рефераты
2) гороскоп
3) халява
4) mp3
5) чат
6) открытки
7) игры
8) работа
9) icq
10) сонник
11) Чечня
12) анекдоты
13) поздравления
14) фото
15) футбол
16) кавказ-центр
17) музыка
18) хакер
19) Земфира
20) crack
21) мода
22) библиотека
23) мебель
24) картинки
25) Москва
26) психология
27) сочинения
28) фоменко
29) оружие
30) ваз
31) mtv
32) стульчик
33) тосты
34) новости
35) словари
36) программы
37) приколы
38) драйвер
39) delphi
40) радио
41) журнал
42) аккорды
43) алсу
44) games
45) Путин
46) досуг
47) экология
48) dvd
49) бодибилдинг
50) кино
6.2. Запросы из двух слов

51) карта москвы
52) мумий тролль
53) телефонный справочник
54) русское радио
55) скрытые камеры
56) кавказ центр
57) руки вверх
58) виртуальные открытки
59) britney spears
60) доска объявлений
61) телефонная база
62) секретные материалы
63) желтые страницы
64) горные лыжи
65) прогноз погоды
66) русское лото
67) российская газета
68) курс доллара
69) машина времени
70) курсы валют
71) тексты песен
72) библиотека мошкова
73) backstreet boys
74) расписание поездов
75) сектор газа
76) visual basic
77) tomb raider
78) психологические тесты
79) живые камеры
80) доски объявлений
6.3. Запросы из трех слов

81) день святого валентина
82) гости из будущего
83) московская коллекция рефератов
84) правила дорожного движения
85) телефонный справочник москвы
86) работа за рубежом
87) соло на клавиатуре
88) англо-русский словарь
89) китайский новый год
90) работа для вас
91) горе от ума
92) аргументы и факты
93) центральный дом подарков
94) московская регистрационная палата
95) великая отечественная война
96) российская государственная библиотека
97) комитет солдатских матерей
6.4.Запросы из четырех слов

98) из рук в руки
99) теория государства и права
100) red hot chili peppers