Помощь в написании студенческих работ
Антистрессовый сервис

Методика работы с экспертами. 
Обработка оценок экспертов

РефератПомощь в написанииУзнать стоимостьмоей работы

При выделении факторов следует формулировать их либо в оценочных понятиях (цена, скорость, размер, объем и т. д.), либо в тенденциях (уменьшение чего-то, увеличение и т. д.). Не стоит вводить в список факторы, оценку которых можно градуировать по принципу «присутствует — отсутствует». Это не позволит исследовать модель на гибкость или задавать очень низкие (очень высокие) начальные (текущие… Читать ещё >

Методика работы с экспертами. Обработка оценок экспертов (реферат, курсовая, диплом, контрольная)

Этап 1. Опрос экспертов. Опрос экспертов проводится по следующему алгоритму.

  • 1. Опрос каждого эксперта: описание его представлений о ПрО с помощью введенных лингвистических шкал.
  • 2. Составление сводной таблицы оценок.
  • 3. Выведение конечной оценки.

Этап 2. Выведение суммарной оценки. В опросе принимали участие три эксперта.

Сравнение оценок и выведение единой оценки проводилось путем выбора коррелирующего значения:

  • • если все три оценки имеют одинаковый знак и абсолютные значения, то суммарная оценка по знаку и абсолютному значению равна этому значению;
  • • если все три оценки одинаковы по знаку и различны по абсолютным значениям, то суммарная оценка представляет собой среднее абсолютных значений;
  • • если все три оценки имеют одинаковый знак и две из них принимают одинаковое абсолютное значение, то третья оценка отбрасывается, а суммарная оценка принимает значение двух одинаковых оценок;
  • • если из трех оценок одна отличается по знаку, а две другие равны, но абсолютным значениям, то оценка с противоположным знаком отбрасывается, а суммарная оценка принимает значение двух других оценок;
  • • если из трех оценок одна отличается по знаку, а две другие различны по абсолютным значениям, то оценка с противоположным знаком отбрасывается, а суммарная оценка представляет собой среднее абсолютных значений двух других оценок.

В ходе работы с экспертами были выработаны некоторые рекомендации для структурирования полученных факторов:

  • • при PEST- и SWOT-анализе похожие («зеркальные») факторы не вводить в разные категории: в таком случае при составлении матрицы смежности эти факторы будут оказывать обратное влияние друг на друга, а при построении орграфа связи между этими факторами будут образовывать петли. Например, если в ходе SWOT-анализа выясняется, что сильные стороны системы являются также и ее слабыми сторонами, то необходимо отказаться от введения этих факторов и в ту и в другую категорию. Следует либо определить, в какую категорию такие факторы вносят больший вклад, либо объединить их со схожими факторами, создать составные факторы и ввести каждый из них в одну из категорий;
  • • при выделении факторов следует формулировать их либо в оценочных понятиях (цена, скорость, размер, объем и т. д.), либо в тенденциях (уменьшение чего-то, увеличение и т. д.). Не стоит вводить в список факторы, оценку которых можно градуировать по принципу «присутствует — отсутствует». Это не позволит исследовать модель на гибкость или задавать очень низкие (очень высокие) начальные (текущие) значения. В противном случае нельзя будет задать адекватного изменения значений факторов, поскольку любое изменение значений вызовет большую амплитуду изменения значений факторов. Если изначальное значение будет очень низким, то любой импульс изменения по отношению к этому значению будет очень большим. Если значение будет изначально высоким, то нельзя будет задать большого прироста. Если необходимо задать малое текущее значение, то минимальное значение (минимально допустимое и отличие от нуля) лучше поставить где-то в середине шкалы и изменить градуировку.

Этап 3. Выявление базисных факторов PEST-анализа. С помощью экспертов выделены следующие базисные факторы (табл. 9.6).

Таблица 9.6

Факторы, выделенные в результате PEST-анализа.

Позиция.

Policy

1. Economy

Развитие политики выделения финансов на содержание КИС.

Размер собственного бюджета IT-отдела.

Цены на ПО и АО.

2. Technology

Скорость обновления новых версий оборудования на рынке.

3. Society

Увеличение числа внутренних пользователей, нуждающихся в услугах КИС.

Развитие политики выделения финансов на содержание КИС. развитие и содержание СРК КИС, как и всей КИС в целом, зависит от размера денежных средств, которые государство готово выделять на нужды университета.

Размер собственного бюджета IT-отдела: IT-отдел разрабатывает собственный бюджет, в котором определено, какими будут статьи расходов отдела (размеры сумм на закупку оборудования, оплату персонала и т. д.).

Цены на ПО и АО: цены на программное обеспечение и аппаратное оборудование.

Скорость обновления новых версий оборудования на рынке: СРК нуждается в обновлении, так как процессы, протекающие в КИС, становятся все более сложными и требуют более совершенного оборудования.

Увеличение числа внутренних пользователей, нуждающихся в услугах КИС. со временем число пользователей КИС увеличивается, как увеличиваются и объемы данных, требующих резервирования.

Этап 4. Выявление факторов на основе ^М^ОГ-анализа. На этом этапе выделены следующие факторы (табл. 9.7).

Таблица 9.7

Факторы, выделенные в результате SWOT-анализа.

Виды факторов.

Policy

1. Strength

Надежность СРК.

Уровень разработки ПРК.

2. Weaknesses

Поддержка производителем ПО и АО, используемого в СРК.

Время записи.

3. Opportunities

Возможность модернизации СРК.

Возможность использования ПО и АО ведущих производителей.

Предоставление услуг внешним пользователям.

Объем внешних инвестиций.

4. Threats

Число инцидентов с СРК.

Угроза со стороны неквалифицированного администратора.

Надежность СРК: надежность СРК РГУИТП является одной из сильных сторон. Надежность обусловлена следующими факторами: качество оборудования, наличие ГТРК, простота системы.

Но с другой стороны, надежность СРК ослаблена тем, что один из двух роботов, которые обслуживают ленточную роботизированную библиотеку, сломан.

Степень разработанности ПРК: информационная система является защищенной от неожиданных сбоев и потерь данных в том случае, если необходимые данные были вовремя сохранены. Порядок, периодичность и данные, подлежащие сохранению, определяет политика резервного копирования.

Поддержка производителем ПО и АО, используемого в СРК. для качественной поддержки СРК необходима поддержка оборудования, используемого в СРК. Поддержка обеспечивает гарантийное обслуживание оборудование, а также возможность замены вышедшего из строя оборудования на новое, совместимое с используемым в системе.

Предоставление услуг внешним пользователям: одна из возможностей информационной системы, которая обеспечивает приток негосударственных средств на содержание и развитие ИС в целом и СРК в частности.

Объем внешних инвестиций', желательно привлечение внешних (коммерческих) инвестиций для развития.

Число инцидентов с СРК: инцидент в работе СРК может быть следствием как внутренних, так и внешних причин. Как следствие, инцидент может повлечь предотвращение своевременного корректного сохранения необходимых данных и повреждение хранящихся копий.

Угроза со стороны неквалифицированного администратора', квалификация администратора играет существенную роль в функционировании СРК. Неквалифицированное вмешательство и управление СРК может повлечь за собой множественные инциденты.

Этап 5. Выделение связей между факторами и определение силы связей. После того как выделены факторы, между ними определяются связи, направление их влияния и сила воздействия. Получены три независимые матрицы смежности (по числу экспертов). После получения оценок всех экспертов и их корреляционного анализа составляется таблица для сравнения оценок и получения оценок силы и направления влияния связей. В табл. 9.8 приводится фрагмент представления таких оценок.

Таблица 9.8

Сводная таблица оценки связей факторов.

Название связи.

Оценка 1.

Оценка 2.

Оценка 3.

Суммарная оценка.

Уровень развития политики выделения с.

шнансов на содержание КИС.

1−2.

0,7.

0,7.

0,3.

0,7.

1−3.

;

;

;

;

1−4.

;

;

;

;

1−5.

;

;

;

1−6.

;

;

0,5.

;

1−7.

;

;

;

;

1−8.

;

;

;

;

1−9.

;

;

;

;

1−10.

0,7.

;

;

;

1−11.

0,7.

;

0,5.

0,6.

1−12.

;

;

;

;

1−13.

;

;

;

;

Размер собственного бюджета IT-отдела.

2−1.

;

;

;

;

2−3.

;

;

;

;

2−4.

;

;

;

;

2−5.

;

;

;

;

2−6.

;

;

0,1.

;

2−7.

;

0,3.

;

;

2−8.

;

;

;

;

2−9.

;

;

;

;

2−10.

0,7.

0,7.

;

0,7.

Название связи.

Оценка 1.

Оценка 2.

Оценка 3.

Суммарная оценка.

2−11.

0,7.

0,7.

0,5.

0,7.

2−12.

—.

—.

—.

—.

2−13.

—.

0,5.

—.

—.

Цены на ПО и АО.

3−1.

—.

0,1.

0,3.

0,2.

3−2.

0,3.

0,5.

0,5.

0,5.

3−4.

—.

0,5.

—.

—.

3−5.

—.

—.

—.

—.

3−6.

—.

—.

—.

—.

3−7.

—.

—.

—.

—.

3−8.

—.

0,1.

—.

—.

Затем выбираются не коррелирующие значения, а оценки того эксперта, которого проводящий опрос инженер по знаниям посчитал наиболее компетентным в данной области. Далее строится орграф ситуации (рис. 9.3).

Орграф ситуации «Развитие СРК КИС».

Рис. 93. Орграф ситуации «Развитие СРК КИС»

По опросам экспертов составлена таблица оценки текущих значений и определения суммарной оценки (табл. 9.9).

Шкала лингвистических переменных остается той же. Таблица оценок составляется аналогичным образом (табл. 9.10—9.12).

Сводная таблица оценки текущих тенденций развития внешних факторов.

Название фактора.

Оценка 1.

Оценка 2.

Суммарная оценка.

Комментарий.

Уровень развития политики выделения финансов на содержание КИС.

Умеренный.

Умеренный.

Умеренный.

Средний.

Цены на, НО и АО.

Высокая.

Высокая.

Высокая.

Высокая.

Скорость развития технологий.

Умеренная.

Умеренная.

Умеренная.

Рейтинговая.

Увеличение числа пользователей, нуждающихся в услугах КИС.

Очень небольшое.

Небольшое.

Очень небольшое.

Рейтинговое.

Поддержка производителем ПО и АО, используемого в СРК.

Умеренная.

Очень незначительная.

Незначительная.

Рейтинговая.

Таблица 9.10

Сводная таблица оценки текущих тенденций развития внутренних факторов.

Название фактора.

Оценка 1.

Оценка 2.

Суммарная оценка.

Комментарий.

Размер собственного бюджета IT-отдела.

Небольшой.

Умеренный.

Малый.

Рейтинговый.

Надежность СРК.

Средняя.

Большая.

Средняя.

Рейтинговая.

Уровень разработки ПРК.

Средний.

Средний.

Средний.

Средний.

Время записи.

Большое.

Умеренное.

Большое.

Рейтинговое.

Возможность модернизации.

Ограниченная.

Ограниченная.

Ограниченная.

Рейтинговая.

Возможность использования ОП и АО ведущих производителей.

Ограниченная.

Серьезная.

Ограниченная.

Рейтинговая.

Число инцидентов с СРК.

Небольшое.

Небольшое.

Небольшое.

Среднее.

Угроза со стороны неквалифицированного администратора.

Очень невысокая.

Небольшая.

Небольшая.

Рейтинговая.

Сводная таблица оценок тенденций развития внешних факторов.

Название фактора.

Оценка 1.

Оценка 2.

Суммарная оценка.

Комментарий.

Уровень развития политики выделения финансов на содержание КИС.

Очень медленно растет.

Умеренно растет.

Очень медленно растет.

Рейтинговый.

Цены на ПО и ЛО.

Умеренно снижаются.

Умеренно растут.

Умеренно растут.

Рейтинговые.

Скорость развития технологий.

Быстро растет.

Быстро растет.

Быстро растет.

;

Увеличение числа пользователей, нуждающихся в услугах КИС.

Умеренно растет.

Очень слабо растет.

Умеренно растет.

Рейтинговый рост.

Поддержка производителем ПО и АО, используемого в СРК.

Умеренно сокращается.

Существенно сокращается.

Умеренно сокращается.

Рейтинговая.

Таблица 9.12

Сводная таблица оценок тенденций развития внутренних факторов.

Название фактора.

Оценка 1.

Оценка 2.

Суммарная оценка.

Комментарий.

Размер собственного бюджета /'/'-отдела.

Умеренно растет.

Быстро растет.

Умеренно растет.

Рейтинговый.

Надежность СРК.

Умеренно снижается.

Умеренно растет.

Умеренно уменьшается.

Рейтинговая.

Уровень разработки ПРК.

Существенно растет.

Быстро растет.

Быстро растет.

Рейтинговый.

Время записи.

Умеренно растет.

Умеренно растет.

Умеренно растет.

;

Возможности модернизации.

Очень быстро растут.

Очень быстро растут.

Очень быстро растут.

;

Возможность использования ПО и АО ведущих производителей.

Умеренно растет.

Умеренно растет.

Умеренно растет.

Число инцидентов с СРК.

Умеренно растет.

Очень медленно растет.

Умеренно растет.

Рейтинговая.

Угроза со стороны неквалифицированного администратора.

Существенно уменьшается.

Сильно уменьшается.

Существенно уменьшается.

Рейтинговая.

Этап 6. Разработка сценариев. Сценарий саморазвития. Для того чтобы понять, нужно ли вмешательство в развитие СРК, необходимо разработать сценарий саморазвития.

Первый сценарий саморазвития задает следующую условную ситуацию: модель рассматривается с точки зрения изменений внешних факторов без учета развития внутренних. Условной эта ситуация является постольку, поскольку в тог же промежуток времени не рассматриваются тенденции изменений внутренних факторов, а лишь оцениваем их значения на выходе.

Второй сценарий саморазвития задает развитие внешних (независимых), факторов и тенденции изменений внутренних факторов без вмешательства ЛПР по проблеме. В данном случае эксперт оценивает тенденции изменений факторов, на которые окажет влияние «невмешательство» ЛПР.

Сценарии стратегии управления развитием. Попытаемся найти факторы, воздействующие на ситуацию с целью приведения модели к желаемому состоянию. Исходя из анализа нашей модели, получаем следующую матрицу «Окно возможностей» (табл. 9.13).

Таблица 9.13

Матрица «Окно возможностей» для модели СРК КИС РГУИТП.

Сильные стороны.

Слабые стороны.

Надежность СРК.

Уровень разработки ПРК.

Поддержка производителем ПО и АО, используемого в СРК.

Время записи данных.

Возможности.

Возможность модернизации.

Возможность использования ПО и АО ведущих производителей.

Угрозы.

Число инцидентов с СРК.

Угроза со стороны неквалифицированного администратора.

Сценарий «Сильные стороны — возможности» (табл. 9.14—9.15).

Таблица 9.14

Окно «Сильные стороны — возможности».

Надежность СРК.

Уровень разработки ПРК.

Возможность модернизации.

Возможность использования ПО и АО ведущих производителей.

Факторы.

Л и н гвистическая оценка.

Значения, %.

Целевые.

Возможность модернизации.

Умеренное.

До 32,6.

Возможность использования ПО и АО ведущих производителей.

Большое.

До 23,7.

Управляющие.

Повысить уровень разработки ПРК.

До максимального значения.

До 85.

Повысить уровень надежности СРК.

До большого значения.

До 38,5.

Таблица 9.16

Сценарий «Сильные стороны — угрозы» (табл. 9.16—9.17).

Окно «Сильные стороны — угрозы».

Надежность СРК.

Уровень разработки ПРК.

Число инцидентов с СРК.

Угроза со стороны неквалифицированного администратора.

Таблица 9.17

Набор факторов сценария «Сильные стороны — угрозы».

Факторы.

Лингвистическая оценка.

Значения, %

Целевые.

Число инцидентов с СРК.

Очень небольшое.

Падение на 22,3.

Угроза со стороны неквалифицированного администратора.

Очень небольшая.

Падение на 7,4.

Управляю;

щие.

Уровень надежности СРК.

Высокий.

Рост на 27,3.

Уровень разработки ПРК.

Высокий.

Рост на 40.

Сценарий «Слабые стороны — возможности» (табл. 9.18—9.19).

Таблица 9.18

Окно «Слабые стороны — возможности».

Поддержка производителем ПО и АО, используемого в СРК.

Время записи данных.

Возможность модернизации.

Возможность использования ПО и АО ведущих производителей.

Факторы.

Лингвистическая оценка.

Значения, %.

Целевой.

Время записи данных.

Непродолжительное.

Падение на 15.

Управляющие.

Возможность использования ПО и АО ведущих производителей.

Широкие.

Рост на 20.

Возможности модернизации.

Умеренные.

Рост на 31,6.

Таблица 9.20

Сценарий «Слабые стороны — угрозы» (табл. 9.20—9.21).

Окно «Слабые стороны — угрозы».

Целевые факторы.

Поддержка производителем ПО и АО, используемого в СРК.

Время записи данных.

Число инцидентов с СРК.

Угроза со стороны неквалифицированного администратора.

Таблица 9.21

Набор факторов сценария «Слабые стороны — угрозы».

Факторы.

Лингвистическая оценка.

Значения, %.

Целевые.

Число инцидентов с СРК.

Очень малое.

Падение на 10.

Время записи данных.

Умеренное.

Падение на 10.

Управляющий.

Угроза со стороны неквалифицированного администратора.

Очень малое.

Снижение на 5.

Сценарий «Достижение идеальных показателей». Данный сценарий определяет предлагаемое экспертами желаемое состояние системы (табл. 9.22).

Таблица 9.22

Набор целевых факторов сценария «Достижение идеальных показателей».

Целевые факторы.

Текущее состояние.

Целевое состояние (описание).

Целевое состояние, %

Надежность СРК.

Умеренное.

Высокая.

Рост на 20.

Время записи.

Большое.

Умеренное.

Падение па 10.

Число инцидентов с СРК.

Малое.

Минимальное значение.

Падение на 57.

Угроза со стороны неквалифицированного администратора.

Малое.

Минимальное значение.

Падение на 24.

Также рассматриваются сценарии с вводом управляющих факторов. Они показаны при рассмотрении программной реализации модели в следующем параграфе.

Показать весь текст
Заполнить форму текущей работой