Все методы оценки качества информационной среды эргатической системы направлены на выявление ситуаций, когда предоставляемая оператору информация не обеспечивает в полной мере поддержку выполняемой им деятельности. Главными критериями оценки качества информационной среды являются эффективность работы оператора и се напряженность.
Эффективность работы оператора определяется объективным результатом его действий. При оценке качества информационной среды основными показателями эффективности являются скорость и точность считывания и переработки информации. Напряженность работы определяется теми умственными, физиологическими и субъективными усилиями, которые оператор должен прилагать для достижения результата при работе с информационной средой (цена деятельности).
Избыточная напряженность имеет выраженные негативные последствия для здоровья операторов, а также негативно влияет на саму способность к обработке информации. Поэтому уровень напряженности деятельности оператора является важным фактором безопасности и надежности работы систем "человек – машина".
Рассмотрим подробнее критерии оценки качества информационной среды:
1. Оценка эффективности работы основывается на выполнении оператором заданий с использованием элементов проектируемой или существующей информационной среды. Например, стандартным методом оценки эффективности зрительных индикаторов является эмпирическая оценка скорости и точности считывания значений отображаемой величины. Часто используется метод тахистоскопического предъявления средств отображения на очень короткое время с последующей оценкой точности воспринятой оператором информации. Для тестирования эффективности работы операторов могут привлекаться дорогостоящие симуляторы и тренажеры, обеспечивающие высокую реалистичность выполняемых оператором заданий. К недостаткам этого метода относится его высокая трудоемкость.
Кроме того, даже большие затраты средств и труда не могут гарантировать полную переносимость результатов на ситуацию реального применения человеко-машинной системы. Проблема переноса результатов связана со сложностью отбора заданий, моделируемых ситуаций и тестируемых операторов таким образом, чтобы они адекватно отражали все разнообразие трудовых задач, возникающих на практике ситуаций, а также индивидуальных различий между операторами. В связи с этим экспериментальная оценка эффективности использования информационной среды часто дополняется другими методами. Важные сведения о качестве информационной среды могут быть получены путем установления субъективного мнения операторов.
Для этого используются различные формы интервью, а также стандартизованные опросники. Так, опросники позволяют определить специфические недостатки информационной среды относительно полноты, подробности, непротиворечивости и других свойств предоставляемой информации. Опросный метод, наряду с другими, применяется и для диагностики возникающего у оператора уровня осознания ситуации. Также широко используются экспертные оценки и сформированные экспертными организациями формализованные списки рекомендаций. Метод моделирования является перспективным для оценки качества информационной среды на этапе ее проектирования. Существуют также различные специализированные методы, применяемые для оценки качества информационной среды. Например, методика регистрации движений глаз широко используется для оценки зрительных информационных сред.
Она позволяет определить, в каком порядке оператор считывает информацию со зрительных дисплеев, а также время, в течение которого фиксируется каждый элемент зрительного интерфейса. Анализ этих данных позволяет сделать вывод о том, насколько компоновка элементов интерфейса обеспечивает эффективное считывание информации, а также определить элементы интерфейса, организация которых не является оптимальной. Для зрительных дисплеев также применяются компьютерные методы анализа изображений для оценки степени их "перегруженности".
2. Оценка напряженности деятельности оператора производится различными методами. Широко применяются стандартизированные опросники. В частности, при работе со зрительными интерфейсами может оцениваться уровень зрительного утомления и утомления в целом. Опросный метод используется для оценки эмоционального состояния и диагностики уровня стресса, уровня перцептивной и когнитивной нагрузки, возникающей при работе с информационной средой.
Состояние оператора сегодня часто оценивается с помощью психофизиологических показателей. Например, уровень когнитивной нагрузки может определяться на основе показателей сердечной деятельности, электрической активности мозга (фоновая ЭЭГ), глазодвигательной активности. Относительно надежными индикаторами увеличения нагрузки являются увеличение вариабельности сердечного ритма, увеличение размера зрачка, снижение мощности альфа-ритма, увеличение доли длинных (более 300 мс.) фиксаций глаз. Регистрация показателей когнитивной нагрузки при выполнении операторами тестовых заданий может дать богатый материал, позволяющий не только оценить сложность заданий в целом, но и определить, при использовании каких элементов интерфейса операторы испытывают особенные трудности.