Как обычно – больше шуму и таинственности. Хотя шум и таинственность все более благодаря Жене Трофименко (respect!), оценившему сию бумажку в 1000 вечнозеленых енотоф.

1. Предварительная оценка
Шкала предварительной оценки состоит из оценок “404″, “Вирус”, …, “Порноконтент”, “Порнореклама”, “Порноконтент+реклама”
Это технические опции, которые непосредственно не относятся к релевантности. Если документ с виду не содержит порноконтент, ставим оценку “не порно” и т.д.
После того, как предварительная оценка поставлена, открывается основная шкала.

2. Оценка по шкале релевантности
Шкала релевантности содержит семь оценок: “Витальны”, “Полезный”, “Релевантный+”, “Релевантный-”, “Нерелевантный”, “Спам”, “Не про то”.

2.1. Витальный сайт – официальный сайт предприятия, товара, услуги, сервиса или человека. Также витальные страницы есть у законов, официальных документов (в том числе инструкций) и художественных произведений. Далеко не каждый запрос предполагает существование витального сайта, но по некоторым запросам их может быть два и больше. Одним словом, главный критерий витального сайта – официальный ответ на запрос.

2.2. Полезный ресурс не только отвечает на запрос, но кроме этого дает пользователю дополнительную информацию по его запросу. Также оценку “Полезный” заслуживают тематические сайты, с большим количеством информации по интересующей теме, а еще поддомены витального сайта, сайты филиалов искомой фирмы или факультетов искомого вуза.

2.3. Релевантный+ – документ отвечает на запрос пользователя.

2.4. Релевантный- документ соответствует теме запроса, но на сам запрос не отвечает. Например, для запроса “карта-схема города Твери” релевантным- будет либо карта не того типа (топографическая или др.), либо карта одного района Твери вместо всего города, либо карта в слишком мелком масштабе.

2.5. Нерелевантный документ не отвечает запросу.

2.6. Спам – это вредоносные сайты и странцы. Обман пользователя, бессмыслица и мусор.

2.7. Не про то – это оценка для документов, которые содержат слова запроса, но смысл запроса в них искажен. Это может происходить из-за омонимии, разрыва словосочетания, пропуска важного слова, поиска других форм слова. Когда по запросу “Лев Толстой” находят Татьяну Толстую или вообще материалы про полных людей – это “не про то”.

Так вот ты какой, северный олень мануал для асессоров!
Благодарности:

• Niketas`у, доставшему,
• Николаю Дубровскому, запустившему в сеть на общее обозрение.

ПыСы: будете тырить – тырьте пожалуйста со ссылками на этих уважаемых людей.