Экспертный метод в оценке качества продукции

Методы экспертных оценок в настоящее время получили достаточно широкое распространение и основаны на мобилизации знаний и профессионального опыта. Их «корни» — теория выбора и принятия решений. Проведение экспертного оценивания — это всегда эксперимент. Задачи экспертного оценивания возникают на различных этапах принятия решений, когда:

отсутствуют статистические данные либо их недостаточно;

не существует достаточно надежных статистических методов оценки событий на основе прошлого опыта;

в развитии прогнозируемого процесса намечаются существенные изменения, характеристики которых мало известны или вовсе не известны.

Методы экспертных оценок базируются на гипотезе, что, используя мнения нескольких специалистов — экспертов, удается создать близкий к реальному образ будущего состояния объекта, и разделяются на методы получения индивидуальных оценок от членов экспертной группы и методы получения коллективных оценок от экспертной группы в целом [3.8, 3.20, 3.21]. Исходной информацией при этом служат различные формы экспертного опроса, формулирование мнений специалистами в области исследуемого объекта, а также изучение документов и опубликованной информации. Для получения коллективной экспертной оценки используют метод комиссии («круглого стола»), «мозговую атаку» или «мозговой штурм», метод «Дельфи» («Дельфийскую методику»), метод построения дерева решений (ПАТТЕРН) и деловую игру (рис. 3.4).

Индивидуальные экспертные оценки — это результаты обработки данных анкетирования, интервью и тестирования, а также аналитические оценки. Из методов аналитического экспертного оценивания наиболее распространены аналитические обзоры, морфологический анализ и метод сценариев (рис. 3.4).

В области оценки качества продукции применяются экспертные методы для следующего:

• а) определение номенклатуры показателей качества;
• б) определения коэффициентов весомости показателей качества
• в) выбора базовых образцов и безразмерных значений базовых показателей качества;
• г) классификации оцениваемой продукции;
• д) оценивание показателей с помощью органов чувств или органолептическое оценивание.

Органолептическое оценивание возникает тогда, когда нужно оценит сенсорно воспринимаемые свойства продукции, такие как вкус продукта питания, цвет ткани, различимость шрифта, соответствие моде одежды и др.

В практике экспертной оценки качества, в частности при экспертной оценке потребительских свойств продукции применяются комплексная и оперативная экспертизы.

Комплексная экспертиза проводится для всестороннего изучения и оценки качества групп однородных изделий, выпускаемых серийно. При экспертизе реализуется комплексный подход к оценке качества продукции, и получают не только более полную характеристику оцениваемого объекта, но и определенный научный, методический и нормативный материал, используемый для проведения других видов экспертиз.

Оперативная экспертиза основывается на данных, полученных при проведении предшествующих комплексных экспертиз. Этот прием позволяет существенно сократить объем и сроки экспертных работ при достаточной глубине и обоснованности заключений.

Основным методом экспертного оценивания является метод комиссии.

Экспертная комиссия по оцениванию качества продукции — группа специалистов, организованных для экспертного оценивания. Она включает экспертную и рабочую группы.

Экспертная группа — высококвалифицированные специалисты (исследователи, конструкторы, технологи, дизайнеры, товароведы, экономисты и др.), отвечающие требованиям профессиональной и квалиметрической компетентности, заинтересованности в участии в работе экспертной комиссии, деловитости и объективности.

Рабочая группачасть экспертной комиссии по оцениванию качества продукции, которая состоит из специалистов, организующих деятельность экспертной группы и обрабатывающих суждение экспертов о качестве продукции. В состав рабочей группы входят организатор, консультант по оцениваемой продукции и технические работники.

Экспертное оценивание осуществляется в четыре этапа.

На первом этапе осуществляется назначение лиц, ответственных за организацию работ по экспертной оценке качества продукции, формулирование целей оценки лицом, принимающим решение (ЛПР), и формирование рабочей и экспертной групп. Формирование экспертной группы заключается в определении ее структуры (может быть несколько подгрупп определенной специализации), профессионального состава, количества экспертов и в отборе экспертов на основе их тестирования или численной оценки. Число экспертов, входящих в группу, зависит от требуемой точности средних оценок и должно составлять от семи до двадцати человек.

Например, при отборе экспертов должен осуществляться анализ их соответствия. Хороший эксперт должен обладать целым рядом качеств. Основные из них:

компетентность — знание, осведомленность и авторитет в какой-либо области деятельности;

креативность — способность использовать методы решения задач полностью или частично неизвестные;

эвристичность — способность выявлять неочевидные проблемы; интуиция — способность угадывать решение без его обоснования;

предикативность — способность предсказывать или предчувствовать будущее решение;

независимость — способность противостоять мнениям большинства;

всесторонность — способность видеть проблему с разных точек зрения.

Отбор экспертов проводится в два приема:

• 1) предварительный отбор экспертов в зависимости от круга решаемых задач и компетентности в рассматриваемой и близких областях деятельности.
• 2) тестирование или численные оценки экспертов.

Остановимся на процедуре подбора экспертов. Начнем с определения компетентности, например, по следующей схеме. Первоначально отобранным экспертам предоставляют список вопросов, на которые в процессе проведения экспертизы должны быть получены ответы, и просят рекомендовать специалистов, способных дать заключение по представленным вопросам. Затем список вопросов предоставляется каждому из названных специалистов, которые в свою очередь также называют людей, компетентных в вопросах данного списка, и т. д. Этот процесс заканчивается, как только перестают называться новые специалисты. Такая процедура позволяет составить достаточно полный список компетентных лиц.

Тестирование экспертов происходит путем ответа в письменной форме на ряд вопросов, с тем, чтобы проверить его знания в области проводимой экспертизы и выявить наличие способностей, перечисленных выше.

На втором этапе осуществляется разработка классификации и определение номенклатуры показателей качества оцениваемой продукции, подготовка анкет и пояснительных записок для экспертов, выбор методов, способов и процедур оценивания. Он выполняется рабочей группой. Рабочая группа учитывает особенности оцениваемой продукции, установленные сроки выполнения работы, ее трудоемкость, области возможного использования полученных результатов и определяет перечень операций, которые должны быть выполнены экспертами.

Для получения суждений экспертов используются методы опроса. Опрос — процесс выявления экспертных суждений по качеству продукции. Процедура опроса экспертов включает интервьюирование, анкетирование и смешанное анкетирование (анкетирование с участием консультанта). При интервьюировании суждение эксперта выявляется в процессе беседы в рамках определенного плана.

Третий этап — это работа экспертной групп, члены которой выражают свои суждения в соответствии с установленными на втором этапе методами, способами и процедурами. Таким образом, на основе опроса или анкетирования происходит оценка потребительских продукции.

На четвертом заключительном этапе работы экспертной комиссии осуществляется обработка экспертных суждений и оформляется экспертное заключение.

Результаты экспертного оценивания могут быть представлены а) в бальном измерении; б) в виде ранжированного ряда, составленного по шкале порядка.

Экспертное оценивание в балльном измерении состоит в следующем. Для назначения оцениваемому свойству количественной характеристики используется бальная шкала. Основной характеристикой бальной шкалы является диапазон — количество градаций, которое включает шкала, т. е. количество оцениваемых точек. Для оценивания качества продукции обычно используется шкала с нечетным числом градаций, в которых имеется средний уровень. Наиболее предпочтительными являются шкалы с пятью и семью градациями. Например, шкала с пятью градациями:

Таблица.6.1 Шкала для оценки качества с пятью градациями.

Таблица 6.2 — Шкала для оценки качества с семью градациями.

Представление результатов экспертного оценивания в виде ранжированного ряда состоит в следующем:

все объекты оценки (изделия, свойства) нумеруются произвольно;

эксперты ранжируют объекты по шкале порядка;

ранжированные ряды объектов, составленные экспертами, сопоставляются;

определяются суммы рангов каждого из объектов экспертной оценки;

на основании полученных сумм рангов строится обобщенный ранжированный ряд;

рассчитываются коэффициентов весомости объектов оценивания как доля рангов одного объекта от суммы рангов по всем объектам.