Виды, состав, объем и методы испытаний системы

Основные требования к видам, составу, объему и методам испытаний системы уточняются в процессе проектирования Системы и согласовываются на стадии "Разработка алгоритма преобразования поискового запроса и действующего прототипа." седьмого этапа (см. таблицу 3 п.4.5 настоящего ТЗ).

Проверка качества работы системы должна оцениваться показателями релевантности и пертинентности результатов поиска. Релевантность результатов поиска относительно поискового запроса должна оцениваться уже существующими методами, реализованными в каком-либо программном обеспечении. Пертинентность результатов поиска должна оцениваться статистически, путем анализа открываемых пользователем документов-результатов поиска. В процессе работы система должна аккумулировать показатели пертинентности результатов поиска с целью обеспечения возможности применения данных показателей ходе дальнейшей обработки поисковых запросов. Оценку результатов поиска на этапе исследования результатов работы системы должны проводить специалисты предметных областей методом экспертных оценок. По результатам данных оценок принимается решение о качестве работы текущей реализации системы интеллектуального поиска и необходимости совершенствования разработанных механизмов интеллектуального поиска.