|
Неформальные методы оценивания |
В процессе моделирования больших систем неизбежно приходится оценивать (получать, формировать) значения различных параметров (характеристик, атрибутов) моделируемых систем. Значения некоторых параметров удается непосредственно измерить (например, геометрические характеристики доступных предметов, отрезки времени не очень большой продолжительности и т.п.) или вычислить по известным аналитическим зависимостям (например, вероятность сложного события по вероятностям составляющих его событий, площади геометрических фигур по известным их размерам и т.п.). Если имеются данные о функционировании моделируемой системы или ее аналога за достаточно продолжительное время, то значения некоторых параметров можно определить путем статистической обработки их значений, зафиксированных в процессе наблюдения. Общеизвестные методы математической статистики позволяют не только определить текущее значение параметра, но и оценить достоверность такого определения в зависимости от продолжительности (числа) наблюдений и их совпадения (разброса), определить необходимое число наблюдений для определения значения параметра с заданной точностью. Иногда значения интересующих параметров удается определить по аналогии с значениями других, схожих с определяемым, значения которого известны.
Однако нередки случаи, когда значения параметров моделируемых систем не удается получить названными выше методами. Такая ситуация бывает особенно характерной для систем с высоким уровнем неопределенности и не имеющих достаточной предыстории функционирования. Именно такими являются рассматриваемые здесь системы защиты информации. Например, в настоящее время нет данных, необходимых для определения таких параметров, как вероятности проявления дестабилизирующих факторов в различных АСОД и различных условиях их функционирования, вероятности успешного использования злоумышленником проявившихся дестабилизирующих факторов, показатели эффективности функционирования различных средств защиты (особенно программных и организационных) и многих других. В таких случаях неизбежно приходится пользоваться неформальными методами оценивания, основанными на оценках людей-специалистов в соответствующей сфере. Из неформальных методов оценивания наиболее известными являются методы экспертных оценок, когда каждый эксперт-специалист из специально сформированной группы дает независимо от других оценку значениям искомых параметров, после чего осуществляется совокупная статистическая обработка оценок. Экспертными оценками называются такие методы поиска решений сложных задач, которые основаны на суждениях (оценках, высказываниях) специально выбираемых (назначаемых) экспертов, т.е. специалистов, компетентных в той области, к которой относится решаемая задача. Эти методы достаточно просты по своей сущности, они нашли широкое отражение в специальной литературе. Последовательность и содержание решения задач методами экспертных оценок в самом общем виде могут быть представлены следующим образом: разработка постановки задачи; обоснование перечня и содержания тех параметров задачи, для определения значений которых целесообразно использовать экспертные оценки; обоснование форм и способов экспертных оценок; разработка реквизитов (бланков, инструкций и т.п.), необходимых для проведения экспертных оценок; подбор и подготовка (обучение, инструктаж) экспертов, привлекаемых для решений задачи; организация и обеспечение работы экспертов; контроль и первичная обработка экс-пертных оценок; базовая обработка экспертных оценок. |