Размещено на http://www.allbest.ru/

Творческое эссе

по дисциплине: Исследование систем управления

на тему: Разновидности сбора мнений эксперта

Жилов Алексей Витальевич

На основе более чем двадцатилетнего опыта комиссии "Экспертные оценки" Научного совета АН СССР по комплексной проблеме "Кибернетика" и двадцати лет работы ее научного семинара "Математические методы анализа экспертных оценок" в настоящей главе отчета рассматриваются основные проблемы теории и практики экспертных оценок. Современные математические методы экспертных оценок - это в основном методы статистики объектов нечисловой природы. Обсуждаются догмы в области экспертных оценок и современные рекомендации, применение статистики объектов нечисловой природы в экспертных оценках, вопросы построения интегральных показателей качества, эффективности и пр., т.е. рейтингов, а также перспективы создания и применения гаммы современных методик экспертных оценок на основе подходов и результатов указанного научного коллектива. В целом глава дает научное обоснование разработке автоматизированного рабочего места МАТЭК (МАТематические методжы в ЭКспертных оценках). эксперт оценка сценарий

Существует масса методов получения экспертных оценок. В одних с каждым экспертом работают отдельно, он даже не знает, кто ещё является экспертом, а потому высказывает свое мнение независимо от авторитетов. В других экспертов собирают вместе для подготовки материалов для ЛПР, при этом эксперты обсуждают проблему друг с другом, учатся друг у друга, и неверные мнения отбрасываются. В одних методах число экспертов фиксировано и таково, чтобы статистические методы проверки согласованности мнений и затем их усреднения позволяли принимать обоснованные решения. В других - число экспертов растет в процессе проведения экспертизы, например, при использовании метода "снежного кома"

Наиболее широко в исследовании СУ, как правило, используются экспертные методы. Как научный способ экспертный метод был разработан сравнительно недавно и впервые он получил название "Дельфи". В дальнейшем были разработаны другие аналогичные методы, имеющие в своей основе экспертные оценки. Сначала экспертные методы использовались, в основном, для решения задач, связанных с прогнозированием в области науки и техники, а затем они стали применяться в других областях, в том числе в управлении.

Сущность экспертных методов, как при решении задач исследования СУ, так и при использовании их в практике принятия решений в других областях науки, техники, управления, заключается в усреднении различными способами мнений (суждений) специалистов-экспертов по рассматриваемым вопросам.

Экспертный опрос -- это совокупность (еще говорят: комплекс) различных методов, приемов, техник, процедур.

Вид опроса по существу определяет разновидность метода экспертной оценки. Основными видами опроса являются: анкетирование, интервьюирование, метод "Дельфи", мозговой штурм (мозговая атака), дискуссия.

Выбор того или иного вида опроса определяется целями экспертизы, сущностью решаемой проблемы, полнотой и достоверностью исходной информации, располагаемым временем и затратами на проведение опросов. Рассмотрим содержание технологии проведения перечисленных выше опросов.

Анкетирование представляет собой опрос экспертов в письменной форме с помощью анкет. В анкете содержатся вопросы, которые позволяют выяснить существо и аргументацию ответов.

По типу основные вопросы классифицируются на открытые, закрытые и с веером ответов. Открытые вопросы предполагают ответ в произвольной форме. Закрытые вопросы - это такие вопросы, на которые ответ может быть дан в виде "да", "нет", "не знаю". Вопросы с веером ответов предполагают выбор экспертами одного из совокупности предполагаемых ответов.

Открытые вопросы целесообразно применять в случае большой неопределенности проблемы. Этот тип вопросов позволяет широко охватить рассматриваемую проблему, выявить спектр мнений экспертов. Недостатком такого типа вопросов является возможное разнообразие и произвольная форма ответов, что существенно затрудняет обработку анкет.

Закрытые вопросы применяются в случае рассмотрения четко определенных двух альтернативных вариантов, когда требуется по существу определить степень большинства мнений по этим альтернативам. Обработка закрытых вопросов не вызывает каких-либо трудностей.

Вопросы с веером ответов целесообразно использовать при наличии нескольких достаточно определенных альтернативных вариантов. Эти варианты формируются для ориентации экспертов по возможному кругу направлений в решении проблемы. Для получения более детальной информации по каждому вопросу могут быть предложены порядковая и балльная шкалы. Эксперт по каждому ответу выбирает значение порядковой и балльной оценок. Например, значениями порядковой шкалы могут быть "очень хорошо", "хорошо", "удовлетворительно", "неудовлетворительно" или "значительно", "незначительно", "не влияет" и т.п. Обработка анкет с вопросами этого типа по сложности занимает промежуточное место между открытыми и закрытыми вопросами.

Если анкетирование проводится в несколько туров, то целесообразно при большой сложности и неопределенности проблемы вначале использовать открытые типы вопросов, а на последующих турах - с веером ответов и закрытые типы.

Интервьюирование - это устный опрос, проводимый в форме беседы-интервью. Для подготовки беседы опрашивающий разрабатывает вопросы к эксперту. Характерной особенностью этих вопросов является возможность быстрого ответа на них экспертом, поскольку он практически не имеет времени на обдумывание.

Тематика интервью сообщается эксперту заранее, но конкретные вопросы ставятся непосредственно в процессе беседы. Целесообразно в связи с этим готовить последовательность вопросов, начиная от простого и постепенно их углубляя и усложняя, но вместе с тем конкретизируя.

Достоинством этого метода является непрерывный живой контакт с экспертом, что позволяет быстро получить необходимую информацию путем прямых и уточняющих вопросов в зависимости от ответов эксперта.

Недостатками интервью являются возможность сильного влияния опрашивающего лица на ответы экспертов, отсутствие времени для глубокого обдумывания ответов и большие затраты его на опрос всего состава экспертов.

Интервьюер должен хорошо знать анализируемую проблему, уметь четко формулировать вопросы, создать непринужденную обстановку и уметь слушать.

Метод "Дельфи" (название взято из истории Дельфийского оракула при храме Аполлона в г.Дельфы, Древняя Греция). Этот метод (иногда именуется метод "Дельфы") является одним из наилучших методов использования суждения экспертов, предусматривающий проведение опросов в несколько туров. Он представляет собой многотуровую процедуру анкетирования с обработкой и сообщением результатов каждого тура экспертам, работающим инкогнито по отношению друг к другу. Процесс выработки суждений экспертами здесь управляется проводящей опрос рабочей группой через обратную связь.

Основными целями использования индивидуальных экспертных оценок являются:

- прогнозирование развития событий и явлений, а также оценка их значимости в текущем периоде;

- анализ и обобщение результатов, представленных другими экспертами;

- составление сценариев развития ситуации;

- заключение о работе других специалистов или организаций (рецензии, отзывы, экспертизы и т.д.).

Опрос экспертов представляет собой заслушивание и фиксацию в содержательной и количественной форме суждений экспертов по решаемой проблеме. Проведение опросов является основным этапом современной работы групп экспертов. На этом этапе выполняются следующие процедуры:

- решение оганизационно-методических вопросов;

- постановка задачи и предъявление вопросов экспертам;

- информационное обеспечение работы экспертов.

Участники опроса, как правило, осведомлены о цели и задачах опроса, теряется смысл использования косвенных вопросов, проективной техники, тестов и других приемов, с помощью которых обычно выявляют позиции респондента без его ведома. Их использование, а также применение «вопросов-ловушек» может даже нанести заметный ущерб качеству экспертного опроса. Ведь эксперт -- это участник научного исследования, всякие попытки превратить его из субъекта исследования в объект могут поколебать основы взаимного доверия, которое необходимо между организаторами исследования и экспертами. Чтобы добиться активного и серьезного отношения эксперта, дать ему почувствовать себя полноправным участником научного исследования, его необходимо в какой-то мере познакомить с программой исследования. В силу специфики экспертной аудитории основным методом опроса становится не интервью, а анкета, заполняемая самим экспертом. Причем в анкете значительно чаще прибегают к открытым вопросам, которые позволяют лучше установить творческий потенциал эксперта, и дают возможность участнику опроса высказать оригинальную точку зрения. Кроме того, отказ от подсказок ослабляет влияние стереотипов.

Роль эксперта-Эксперт может участвовать в опросе как:генератор, источник идей, гипотез и предложений арбитр по оценке имеющихся данных, характеристик и показателей объекта аудитор по оценке условий постановки эксперимента источник неизвестной исследователю информации, которая служит основой для дальнейшего анализа.

Количество членов экспертной группы значительно меньше в сравнении с количеством респондентов, опрашиваемых при массовом опросе. Отбор экспертов, формирование экспертных групп -- достаточно сложная задача, результат которой в наибольшей степени определяет эффективность метода и правильность полученных решений.

Недостатка м и экспертных методов являются их субъективность и соответствующие этому возможные погрешности результатов экспертизы, существенные затраты на привлечение опытных экспертов для участия в экспертных работах, влияние авторитетных членов экспертной группы и корпоративных интересов на мнение отдельных экспертов.

Обработка экспертных и социологических данных и расчеты мер согласованности требуют трудоемких вычислений. Поэтому следует шире использовать при проведении сбора и обработке результатов экспертной и социологической информации компьютерную технику. Возможности для этого есть, так как автоматизация проведения и обработки результатов подобного рода данных стала предметом создания ряда продуктов программного обеспечения.

Размещено на Allbest.ru