Аналитический обзор по методам обработки экспертной информации

В настоящее время экспертизы проводятся практически во всех сферах человеческой деятельности. Инженеры, врачи, юристы, преподаватели являются в какой-то степени экспертами. Основные виды экспертной деятельности можно классифицировать по областям конкретной профессиональной деятельности и по задачам, решаемым с помощью экспертных оценок [1].

Бешелев С.Д. отмечает, что экспертные оценки применяются в тех ситуациях, когда достоверность информации, необходимой для принятия решения, крайне мала. Эти оценки основаны на способности личности давать полезную информацию в условиях неопределенности [2].

Экспертная оценка — это целая система диагностических методов, которые чрезвычайно широко применяются в менеджменте, экономическом анализе, психологии, маркетинге и других сферах. Эти методы позволяют охарактеризовать, классифицировать, присвоить определенный ранг или оценку событиям и понятиям, которые не поддаются количественному измерению.

Орлов А.И. в своей книге говорит о том, что экспертная деятельность в конкретных областях обычно регулируется соответствующими нормативными актами и осуществляется в соответствии с теми или иными методическими материалами [1].

Проблема выбора и обоснования коллегиальных решений по вопросам стратегии и тактики развития исследуемых задач, решения вопросов по распределению ограниченного количества ресурсов, поиску эффективных решений в экстремальных ситуациях требуют привлечения экспертов-специалистов. При этом предполагается, что информация об объемах анализа слабо структурирована и носит в основном качественный характер [3].

Метод экспертной оценки — получение информации путем проведения экспертного опроса. Суть метода заключается в том, что экспертами проводится анализ возможного развития проблемной ситуации в будущем с качественной или количественной характеристикой уровня его достоверности и последующей формальной обработкой результатов. Основное отличие экспертного опроса от массовых опросов — это то, что к участию в нем приглашаются высококвалифицированные специалисты.

По мнению Прохорова Ю. К. характеристики группы экспертов определяются на основе индивидуальных характеристик экспертов: компетентности, креативности, отношения к экспертизе, конформизма, конструктивности мышления, коллективизма, самокритичности.

Компетентность — степень квалификации эксперта в определенной области знаний. Компетентность может быть определена на основе анализа плодотворной деятельности специалиста, уровня и широты знакомства с достижениями мировой науки и техники, понимания проблем и перспектив развития.

Для количественной оценки степени компетентности используется коэффициент компетентности, с учетом которого взвешивается мнение эксперта. Коэффициент компетентности определяется по априорным и апостериорным данным. При использовании априорных данных оценка коэффициента компетентности производится до проведения экспертизы на основе самооценки эксперта и взаимной оценки со стороны других экспертов. При использовании апостериорных данных оценка коэффициента компетентности производится на основе обработки результатов экспертизы.

Креативностью называют способность решать творческие задачи. В настоящее время кроме качественных суждений, основанных на изучении деятельности экспертов, нет каких-либо предложений по оценке этой характеристики.

Конформизм — это подверженность влиянию авторитетов. Наиболее сильно конформизм проявляется при проведении экспертизы в виде открытых дискуссий. Мнение авторитетов подавляет мнение лиц, обладающих высокой степенью конформизма. Отношение к экспертизе является очень важной характеристикой качества эксперта при решении данной проблемы. Негативное или пассивное отношение специалиста к решению проблемы, большая занятость и другие факторы существенно сказываются на выполнении экспертами своих функций. Поэтому участие в экспертизе должно рассматриваться как плановая работа. Эксперт должен проявлять интерес к рассматриваемой проблеме.

Конструктивность мышления подразумевает, что эксперт должен давать решения, обладающие свойством практичности. Учет реальных возможностей решения проблемы очень важен при проведении экспертного оценивания.

Коллективизм должен учитываться при проведении открытых дискуссий. Этика поведения человека в коллективе во многих случаях существенно влияет на создание положительного психологического климата и тем самым на успешность решения проблемы. Самокритичность эксперта проявляется при самооценке степени своей компетентности, а также при учете мнений других экспертов и принятии решения по рассматриваемой проблеме [4].

В ходе проведения опроса экспертов осуществляется выявление и констатация их суждений по существу исследуемого объекта. Форма проведения опроса фактически является основой, определяющей вид метода организации и проведения экспертизы. Основными формами опроса являются: анкетирование, инрервьюирование, метод Дельфы, мозговой штурм, дискуссия.

В ходе анкетирования осуществляется опрос экспертов в письменной форме с помощью анкет. Анкета — список вопросов, составляемый организаторами проведения экспертизы, который предъявляется экспертам. Их ответы служат исходными эмпирическими данными для обобщений и выводов. В процессе разработки анкеты организаторам экспертизы необходимо ориентироваться на ее цели и задачи. Должен быть составлен перечень вопросов, тщательно отработано их содержание, выбрана форма и последовательность. При этом следует избегать вопросов, на которые невозможно ответить или отвечать не требуется.

По содержанию вопросы подразделяют на две группы:

• 1) объективные характеристики эксперта (фамилия, имя, отчество, год рождения, образование, специальность, стаж работы по специальности и т. д.);
• 2) характеристики исследуемых аспектов объекта, сведения вспомогательного характера об источниках информации, располагаемой экспертом, о процессе аргументации суждений эксперта и т. п.

Одной из разновидностей форм получения информации в ходе экспертизы является интервьюирование. Интервьюированием называется процесс получения информации интервьюером во время проведения опроса эксперта или группы экспертов по заранее намеченному плану беседы. Для успешного проведения интервью интервьюеру необходимо тщательно его спланировать, проработать состав и очередность задаваемых вопросов, заранее сообщить экспертам тему опроса, не знакомя их с конкретным перечнем вопросов [5].

Обработка экспертных оценок при групповой экспертизе имеет специфику в зависимости от характера информации, выражающей предпочтения экспертов и содержательное обоснование своих предпочтений, целей, назначения и других факторов проводимой экспертизы и заключается в следующем:

• 1) определении обобщенной оценки исследуемых объектов или рассматриваемого объекта по ряду свойств, показателей и относительной их значимости;
• 2) оценки согласованности и зависимости мнений экспертов;
• 3) оценки достоверности полученных расчетных величин.

Цель обработки экспертных оценок заключается в получении обобщенных данных по исследуемым объектам. Их анализ позволяет получать дополнительную информацию об особенностях процесса оценки, которая помогает формулировать выводы о качестве проведенной экспертизы и причинах возможных расхождений мнений коалиций экспертов.

К наиболее употребительным процедурам экспертных измерений относятся: ранжирование, парное сравнивание, множественные сравнения, непосредственная оценка, метод Черчмена-Акоффа, метод Терстоуна, метод фон Неймана-Моргенштерна. Рациональность применения тех или иных методов в основном определяется характером анализируемой информации. Если оправданы лишь качественные оценки объектов по некоторым качественным признакам, то используются методы ранжирования, парного и множественного сравнения.

Если характер анализируемой информации такой, что целесообразно получить численные оценки объектов, то можно использовать какой-либо метод численной оценки, начиная от непосредственных численных оценок и заканчивая более тонкими методами Терстоуна и фон Неймана-Моргенштерна.

Метод ранжирования представляет собой процедуру упорядочения объектов, выполняемую экспертом. На основе знаний опыта эксперт располагает объекты в порядке предпочтения, руководствуясь одним или несколькими выбранными показателями сравнения. В зависимости от вида отношений между объекта ми возможны различные варианты упорядочения объектов.

Метод парного сравнения представляет собой процедуру установления предпочтения объектов при сравнении всех возможных пар. В отличие от ранжирования, в котором осуществляется упорядочение всех объектов, парное сравнение объектов является более простой задачей.

Множественные сравнения отличаются от парных тем, что экспертам последовательно предъявляются не пары, а тройки, четверки, n-ки (n.

Метод непосредственной оценки заключается в присваивании объектам числовых значений в шкале интервалов. Эксперту необходимо поставить в соответствие каждому объекту точку на определенном отрезке числовой оси. При этом необходимо, чтобы эквивалентным объектам приписывались одинаковые числа [6].

Обработка результатов экспертизы представляет собой трудоемкий процесс. Выполнение операций вычисления оценок и показателей их надежности вручную связано с большими трудовыми затратами даже в случае решения простых задач упорядочения. В связи с этим целесообразно использовать вычислительную технику и особенно ПК. Применение ПК выдвигает проблему разработки машинных программ, реализующих алгоритмы обработки результатов экспертного оценивания.

Современный этап развития научно-технического прогресса вызвал ярко выраженную потребность в разработке экспертных методов оценки проектов и исследовательских систем [7].

Таким образом, наиболее важная проблема состоит в разработке качественной информационной системы по методам обработки экспертной информации.