Приложение А (справочное). Различия между видами испытаний

Приложение А
(справочное)

Различия между видами испытаний

Таблица А.1

	Технологическое испытание	Сценарное испытание	Оперативное испытание
Объект испытания	Биометрический компонент (алгоритм сравнения или выделения признаков)	Биометрическая система	Биометрическая система
Истинная информация	Известна при условии, что установлены ошибки сбора данных и области пересечения объединенных данных	Известна при условии, что ошибки сбора данных и отказа учитывают нежелательное поведение субъекта	Зависит от доступных контрольных и инструментальных средств, устанавливающих, получены ли данные от подлинных лиц или от "самозванцев"
Поведение пользователя, контролируемое администратором испытания	Не контролируется в процессе испытания; может контролироваться во время записи биометрических данных, в противном случае считается неконтролируемым	Контролируется (до тех пор, пока поведение пользователя не станет независимой величиной)	Не контролируется
Пользователь имеет сведения о результатах попытки в реальном времени	Нет	Да	Да
Воспроизводимость результатов	Воспроизводимые (фиксированная база данных)	Квазивоспроизводимые (если контролируется сценарий испытания и выборка)	Невоспроизводимые
Контроль параметров окружающей среды	Может выполняться во время записи биометрических данных, в противном случае считаются неконтролируемыми	Контролируемые и (или) записаны	Неконтролируемые, идеально записаны
Запись взаимодействия с пользователем	В процессе испытания не записывается; может записываться во время регистрации	Записывается	Записывается во время регистрации; может записываться во время верификации или идентификации
Протокол типичных результатов	Сравнение биометрических компонентов или модификаций компонентов (т.е. алгоритмов сравнения или выделения или датчиков)	Сравнение биометрических систем; определение критических эксплуатационных факторов; измерение моделируемых эксплуатационных характеристик	Измерение эксплуатационных характеристик в условиях эксплуатации
Типичные характеристики	Большая часть метрик эксплуатационных характеристик (кроме сквозной пропускной способности); большая часть вероятностей ошибок; эксплуатационные характеристики, подходящие для биометрической системы широкомасштабной идентификации, где сложно собрать большую испытуемую группу	Прогнозируемые сквозная пропускная способность, ВЛС, ВЛНС, ВОСД, ВОР, ВЛД, ВЛНД	Сквозная пропускная способность. Для испытания и определения ВЛД и ВЛНД необходимы знания об истинной информации
Ограничения	База данных, полученная с помощью одного или более датчиков, идентичность которых известна или неизвестна	Эксплуатационные, инструментальные	Эксплуатационные, инструментальные; обычно доступны только вероятности принятия решения
Испытуемая группа людей	Записанная	Реальная	Реальная
Примечание - В таблице приведены основные характеристики и отличительные особенности испытания биометрических систем, но в некоторых случаях допускаются исключения.