Формирование показателей качества продукции

- фактические числа оценок слева и справа от выбранной границы в распределении Б;

- ожидаемые числа оценок (рассчитываются пропорционально частостям оценок слева и справа от выбранной границы в распр-ии А).

- общее число оценок в распределениях А и Б соответственно;

- число оценок в распределении А слева и справа от выбранной границы.

Если >, то эффект сдвига медианы считается достоверным при числе степеней свободы f = 1.

2. Исследование изменения рассеяния

Достоверность влияния фактора, проявляющегося в изменении рассеяния оценок можно проверить, выбирая положение 2-х границ, разделяющих новые распределения Б после воздействия фактора на 3 части и вычисляя .

- фактические числа оценок в левой, средней и правой частях распределения Б.

Ожидаемые значения оценок рассчитываются по тем же формулам:

Если >, то изменение рассеяния является достоверным (f = 2).

2.5.5 Шкала интервалов

Шкала интервалов - это шкала измерений, на которой фиксируется разница сопоставляемых размеров.

По данным этой шкалы можно оценить насколько один размер отличается от другого. То есть на этой шкале разрешены арифметические действия сложения и вычитания. Всегда произвольно выбирается начало отсчёта (нулевое значение шкалы). Деление шкалы на равные части (градация шкалы) так же не регламентируется. Измерение осуществляется подсчётом числа градаций в интервале ? Qij.

Градация служит единицей измерения.

Примеры шкалы интервалов:

- температурная шкала Цельсия

Единица градации - градус.

Точка замерзания воды или 1-я реперная точка (0?С), точка кипения воды или 2-я реперная точка (100?С) выбраны произвольно. Выбранный интервал в 100?С разбили на 100 частей.

- температурная шкала Рюмера

Точка замерзания воды (0?С), точка кипения воды(80?С). 80 градаций в интервале.

2.5.6 Шкала отношений

Шкала отношений - это измерительная шкала, на которой отсчитывается численное значение измеряемой величины N как мат. отношение определенного размера Qi к другому размеру Qj.

Результат измерения

- узаконенная единица измерения.



Шкала отношений является наиболее совершенной и широко применяемой. При этом на ней со значениями величин возможны все арифметические действия (+, -, *, /).

2.5.7 Методы определения значений показателей качества продукции

1. По способам получения информации

- измерительный метод

Основан на информации, получаемой с использованием технических измерительных средств (масса изделия, частота вращения двигателя м.б. измерены этим методом).

- расчетный метод

Базируется на использовании информации, получаемой с помощью теоретических или эмпирических зависимостей. Этим методом пользуются при проектировании продукции, когда она не м.б. объектом испытаний.

- органолептический метод

Основан на использовании информации, получаемой с помощью органов чувств человека (показатели качества кондитерских, табачных и парфюмерных изделий определяются органолептические чаще всего в баллах).

- регистрационный метод

Основан на информации, получаемой путем подсчета числа определенных событий, предметов или затрат (показатели надёжности, показатели стандартизации и унификации, патентно-правовые показатели).

Этим методом определяют показатели надежности, показатели стандартизации и унификации, патентно-правовые показатели.

2. По источникам получения информации

- традиционный метод;

- экспертный метод;

- социологический.

Традиционный метод осуществляется должностными лицами специализированных подразделений предприятий (спец. лабораторий, испытательных полигонов).

Экспертный метод осуществляется группой специалистов-экспертов в выбранной области, а социологический - путем опроса определенной категории населения.

2.6 Способы определения коэффициентов весомости

2.6.1 Требования к балльным оценкам весомости

1. Балльные оценки должны быть определены по шкале интервалов.

Это означает, что операция назначения баллов должна обеспечивать равенство психофизиологические определяемых расстояний между ними.

2. Индивидуальная воспроизводимость

Способ назначения баллов должен быть таким, чтобы можно было проверить, что эксперт действительно уверен в своей оценке. Для этого при опросе эксперта применяют контрольную операцию, которая позволяет эксперту с других позиций взглянуть на сравниваемые объекты и вновь выразить свои ощущения.

3. Межэкспертная воспроизводимость

Способ назначения баллов должен быть таким, чтобы при его повторении другим экспертом были получены те же или достаточно близкие оценки.

2.6.2 Общий порядок определения коэффициентов весомости

1) Выбирают способ назначения балльных оценок весомости, способ выполнения контрольной операции; опрашивают экспертов и получают индивидуальные экспертные оценки.

2) Проверяют индивидуальные оценки каждого эксперта на внутреннюю непротиворечивость. В случае обнаружения противоречий проводят повторный опрос экспертов.

3) Проверяют согласованность индивидуальных оценок между собой и выявляют выпадающие индивидуальные оценки и отдельные внутренние согласованные группы оценок (еретиков и школы).

4) В случае обнаружения еретиков и школ выполняют следующие действия:

- проводят собрания экспертной группы, на котором обсуждают обнаруженные разногласия и выполняют повторное назначение оценок;

- если оценки вновь рассогласованы, то принимают решение выполнять дальнейшую разработку в нескольких вариантах в зависимости от количества обнаруженных согласованных групп оценок;

- если это решение не может быть выполнено, то расформировывают экспертную группу и выбирают другой способ ее формирования.

5) Определение обобщающих коэффициентов весомости (усреднение оценок по всем экспертам).

6) Производят нормирование коэффициентов весомости в каждой группе показателей по всем уровням дерева свойств. Исключение малозначимых показателей и перенормировка.

Нормирование:

где - сумма коэффициентов на данном уровне

3 способа определения коэффициентов весомостей:

1. способ вспомогательной шкалы

2. способ парных сравнений

3. стоимостный способ

2.7 Экспертные кривые

Экспертные кривые - это графики, изображающие зависимость между значениями 2-х показателей, построенные на основе экспертных суждений.

Они предназначены для того, чтобы дать наглядную интерпретацию анализируемого явления, выявить характерные элементы анализируемой зависимости и найти параметры этих характерных элементов.

2.7.1 Кривые полезности (желательности)

Эти кривые применяют для отображения уровня удовлетворения некоторой потребности субъекта в зависимости от значения анализируемого показателя.

Пример

Пусть разрабатывается конструкция нового строительного механизма. Требуется изобразить желательность для оператора усилий при перемещении рычага управления.

4 балла - оптимальные усилия; 1 балл - неприемлемые усилия.

Размещено на http://www.allbest.ru/

Задача анализа сводится к поиску характерных элементов (ХЭ).

Можно выявить два характерных элемента:

- плато оптимума усилий вблизи 20 Н;

- кривизна кривой больше слева, со стороны меньших усилий, чем справа.

Изготовителю важно обеспечить, чтобы усилия укладывались в ширину плато, если это невозможно, то выгоднее смещать усилия в большую сторону, так как снижение оценки желательности здесь происходит медленнее.

2.7.2 Кривые безразличия

Их проводят в системе координат, образованной двумя показателями так, чтобы соединить точки, соответствующие равнопредпочтительными комбинациями значений показателей.

По одну сторону от кривой оказывается сочетание значений, каждый из которых предпочтительнее любого сочетания, находящиеся по другую сторону.

Назначение кривых безразличия: сравнение объектов, нахождение оптимальных комбинаций показателей.

Пример

Пусть разрабатывается конструкция мотора для прогулочного катера. Рассматривается два показателя: масса мотора m, максимальная скорость катера vmax.

Масса может изменяться от 80 до 160 кг, максимальная скорость катера - от 20 до 60 км/ч. Оптимальной считается скорость 30-35 км/ч. Эта величина оценивается в 4 балла. Но она справедлива для массы 80 кг (min).

Если v=30-35 км/ч и m=100, то присваивается 3,5 балла и т.д.

Можно сравнивать конструкции: А лучше Б.

Размещено на http://www.allbest.ru/

2.7.3 Обработка индивидуальных графиков

Обобщение индивидуальных графиков, построенных экспертами, допустимо при соблюдении следующих 2-х условий:

1) обобщаемые индивидуальные графики должны иметь одни и те же ХЭ;

2) значения параметров ХЭ должны быть достаточно согласованы.

Причины рассогласованности экспертных кривых:

1. невнимательность эксперта;

2. содержательные соображения эксперта

В этом случае обобщение его индивидуального графика недопустимо. Иногда еретический график отбрасывают, либо проводят обсуждение полученных расхождений в составе экспертной группы.

Пример

Кривые желательности и усилий при перемещении рычага управления.

Размещено на http://www.allbest.ru/

Анализируем первых четырех экспертов, у их графиков есть общие ХЭ.

- участок <15Н: рост усилий все более желателен;

- участок от 15Н до 30Н: плато оптимальных усилий;

- участок > 30Н: рост усилий все менее желателен.

5-й эксперт имеет новый ХЭ по сравнению с первыми 4-мя экспертами: у него отличается кривизна кривой на спадающем участке. Его график еретический, поэтому нельзя использовать для построения обобщенного.

Обобщать можно только первые 4 графика.

Размещено на http://www.allbest.ru/

2.8 Учет взаимодействия показателей качества

Независимость свойств по их влиянию на качество означает, что оценка влияния на качество показателя, характеризующего одно свойство, не зависит от оценки влияния на качество другого показателя, характеризующего другое свойство.

В этой ситуации говорят, что взаимодействие показателей отсутствует.

Существует 2 вида взаимодействия:

1) оценки желательности одного показателя Y зависят от того, какое значение примет другой показатель X;

2) в зависимости от значений показателя X меняется состав показателей, используемых в дальнейшем в МОК.

Взаимодействия по влиянию на качество не зависят от наличия корреляционных связей показателей.

2.8.1 Первый вид взаимодействия

Способы представления взаимодействия:

1. кривые изолированного влияния;

2. таблица (матрица) взаимодействий.

Пример

Пусть микроклимат в цехе завода характеризуют 2 показателя: температура и подвижность воздуха.

Кривая желательности температуры воздуха, построенная одним экспертом:

Размещено на http://www.allbest.ru/

Кривая желательности подвижности воздуха:

Размещено на http://www.allbest.ru/

Данные кривые построены в предположении, что другой показатель зафиксирован на оптимальном уровне.

Аналогичные графики можно построить для другой температуры или для температуры при различных значениях подвижности воздуха.

Так как эти графики отличны, изменение оценок желательности по одному показателю (подвижности) зависит от значения другого показателя (температуры).

Взаимодействие первого типа можно представить в виде таблицы или матрицы взаимодействия. Для каждого сочетания градации назначаются оценки желательности с помощью вспомогательной балльной шкалы.

Пример: температура и подвижность.

Таблица взаимодействия

Температура, ?C	Подвижность, см/с
	< 10	10 - 20	20 - 40	40 - 80	> 80
	Баллы	1,5	4	3	0	-1
0 - 5	0,5	4,0 (1,0)	0,5 (2,2)	-3,0	-4,0
10	2,5	2,5	2,5 (3,2)	0,0 (2,7)	-2,0
15	4,0	1,5	4,0 (4,0)	3,0	0,0	-1,0
20	2,5	0,0	2,5 (3,2)	4,0	1,0	0,0
> 20	-0,5	-1,5	-0,5 (1,7)	3,0	2,0	1,0

Цифры без скобок - оценки желательности сочетания градаций с учетом взаимодействия показателей.

Цифры в скобках - цифры, полученные простым усреднением, они не учитывают взаимодействия градаций.

2.8.2 Второй вид взаимодействия показателей качества

Второй тип взаимодействия состоит в том, что в зависимости от значений, принимаемых одним показателем (или некоторой группой показателей), изменяется состав дальнейших показателей, по которым происходит оценивание качества.

Алгоритм дерева свойств оказывается неприменим. В задачах, требующих учета второго типа взаимодействия, методику оценивания качества описывают с помощью специальной схемы.

- схема отношений между показателями;

- схема подготовки решений (СПР).

СПР составляют так, чтобы, последовательно оценивая проявление указанных в ней признаков, можно было прийти к определенному решению относительно данного объекта.

2.9 Расчет комплексной оценки качества объектов

Пусть построено дерево свойств объекта, определены значения показателей качества в баллах и их нормированные коэффициенты весомости.

Размещено на http://www.allbest.ru/

mijk - нормированные коэффициенты весомости;

i - номер уровня;

j - номер группы на этом уровне;

k - номер показателя в группе.

Комплексная оценка качества

Балльная оценка умножается на соответствующий коэффициент весомости. Полученные результаты суммируются по группам дерева свойств.

K = 1*((0,37*4 + 0,30*1 + 0,20*2.5 + 0,13*3)*0,63 + 0,37*3,5) = 2,98

3. Методы оценки уровня качества продукции

В соответствие с РД 50-149-79 «Методические указания по оценке технического уровня и качества промышленной продукции» при оценке качества однородной продукции следует использовать один из четырех методов:

· дифференциальный

· комплексный

· смешанный

· интегральный

3.1 Дифференциальный метод

Дифференциальный метод заключается в сопоставлении единичных показателей качества оцениваемого изделия с соответствующими показателями базового образца (эталона). При этом определяют:

1) достигает ли качество оцениваемого изделия качества базового образца в целом;

2) какие единичные показатели оцениваемого изделия превосходят или не соответствуют показателям базового образца;

3) насколько отличаются друг от друга единичные показатели свойств оцениваемого изделия и базового образца.

Показатели уровня качества УКi оценивают по следующим формулам:

где i = 1,…,n

где Pi - значение i-го показателя качества оцениваемого изделия;

Piьаз - значение i-го показателя качества базового образца;

n - количество единичных показателей качества.

Формулу (1) используют, когда увеличению абсолютного значения показателя качества соответствует улучшение качества изделия (например: КПД, срок службы, мощность двигателя).

Формулу (2) используют, если увеличение абсолютного значения показателя сопровождается ухудшением качества продукции (например: материалоемкость, содержание вредных веществ, частота отказов).

По результатам расчетов делают следующие оценки:

1) уровень качества оцениваемого изделия выше или равен уровню базового образца, если все значения УКi?1

2) уровень качества оцениваемого изделия ниже уровня базового образца, если все УКi<1.

В тех случаях, когда часть УКi?1, а часть УКi<1 делают следующее: относительные показатели делят по значимости на 2 группы:

· в первую основную группу включают показатели, характеризующие наиболее существенные свойства;

· а во вторую - второстепенные.

Если при этом оказывается, что в первой группе все УКi?1, то можно принять, что уровень качества оцениваемого изделия не ниже уровня базового образца.

Технический уровень оцениваемых изделий, для которых существенно важно значение каждого из рассматриваемых показателей, признается ниже технического уровня базового образца, если хотя бы один из относительных показателей УКi<1.

В дифференциальном методе для наглядной интерпретации результатов используют диаграмму сопоставления показателей - циклограмму.

Циклограмма

И - изделие

Э - эталон

1,2,…,8 - номера показателей качества

Площадь многоугольника свойств изделия меньше площади многоугольника свойств эталона, следовательно, качество изделия по совокупности свойств уступает уровню качества эталона.

Циклограмма позволяет наглядно увидеть, по каким показателям следует принимать управленческие решения.

3.2 Метод комплексной оценки уровня качества продукции

Комплексная оценка уровня качества предусматривает использование комплексного обобщающего показателя. Комплексный показатель представляет собой функцию единичных показателей, которые характеризуют однородную группу свойств, например, технологичности, надежности.

В зависимости от того, как строится комплексный показатель различают две разновидности комплексного метода:

1) Построение комплексного показателя на основе единичных показателей:

К = f (Ki)

Пример1 Показатель качества буровой установки - длина проходки за срок службы (м):

- срок службы в часах; - наработка на отказ в часах;

- среднее время простоя за 1 отказ (час);

- коэффициент, характеризующий долю времени, идущего на профилактику на 1 час работы установки;

- средняя скорость бурения в м/ч.

Пример 2 Главный показатель качества автобуса - Wп - годовая производительность в человеко-км.

где Тн - средняя продолжительность нахождения автобуса в наряде;

vэ - эксплуатационная скорость автобуса (км/ч);

rн - номинальная вместимость автобуса (чел);

гв - коэффициент использования вместимости автобуса;

вп - коэффициент использования пробега автобуса;

бп - коэффициент использования автобуса.

Уровень качества продукции

- уровень качества оцениваемой продукции;

- уровень качества базового образца.

2) Построение комплексного показателя на основе средневзвешенных значений:

· Средневзвешенный арифметический показатель

· Средневзвешенный геометрический показатель

где - коэффициенты весомости i-го показателя;

3.3 Смешанный метод оценки уровня качества

Смешанный метод используют в тех случаях, когда:

1) Единичных показателей достаточно много, они разнообразны, и анализ значений каждого показателя затруднителен.

2) Обобщающий показатель, определяемый комплексным методом, недостаточно полно учитывает все значимые свойства продукции и неадекватно характеризует качество изделия.

Сущность смешанного метода:

1) Все или часть единичных показателей качества объединяют в группы, для которых определяют групповой комплексный показатель. Объединение показателей в группы производится в зависимости от ситуации оценивания качества. Наиболее значимые единичные показатели в группы не включаются, а учитываются отдельно.

2) Численные значения полученных групповых комплексных показателей и самостоятельно учитываемых единичных показателей сопоставляют с соответствующими базовыми показателями.

;

;

.

где Рi - единичные показатели, учитываемые самостоятельно

n - число единичных показателей,

Q - комплексный показатель,

U - среднеарифметический взвешенный показатель,

V - среднегеометрический взвешенный показатель,

mi - коэффициенты весомости.

3.4 Метод интегральной оценки уровня качества

Интегральный показатель Pi - итоговый комплексный показатель, характеризующий в комбинированной общей форме эффективность работы изделия. Он равен отношению суммарного полезного эффекта, выраженного в натуральных единицах измерения, от эксплуатации изделия к затратам на его создание и эксплуатацию за весь срок службы.



где W - полезный эффект, например количество единиц продукции, количество произведенных деталей, количество выполненной работы;

Ki - суммарное капиталовложение, включающее оптовую цену, затраты на установку, наладку и другие работы;

Зэ - эксплуатационные затраты

Формула (*) справедлива для определения интегрального показателя изделия со сроком службы до 1 года. Если срок службы более 1 года, вводится поправочный коэффициент ц(t):

где ц(t) - поправочный коэффициент, зависящий от срока службы:

где t - срок службы (в годах);

Eн - нормативный коэффициент окупаемости капиталовложений.

Рекомендуемое значение: Eн=0,15

3.5 Установление базовых образцов

Баз.образец -образец продукции, характеризуемый реально достижимой совокупностью высоких значений показателей кач.

Он должен отражать высокий технологический уровень продукции и определять НТП по данному классу продукции.

Баз образцами могут служить:

- продукция, отвечающая реально достижимой перспективы требований (перспективный образец)

- планируемая к освоению продукция, показатели кач кот заложены в тех.задание, технических и рабочих проектах.

- продукия, выпускаемая в РФ или за рубежом, отвечающая в момент оценки самым высоким требованиям и являющ наиболее эффективной в эксплуатации.

- государственные и отраслевые стандарты, ТУ, м\народные и зарубежные стандарты, регламентируемые оптимальные значения показателей кач.

Баз.образец следует выбирать из группы продукции, аналогичной по назначению, условиям изготовления, эксплуатации и потребления. В такую группу должна входить продукция:

1. представляющая значительную часть общего объема продукции, производимой и реализуемой за рубежом

2. пользующаяся устойчивым спросом на внутреннем и внешнем рынках

3. конкурентоспособная на мировом и внутреннем рынках

При отсутствии реального базового образца допустимо сравнивать продукцию с искусственным баз.образцом, показатели которого могут в лучшую сторону отличаться от оцениваемого изделия. Баз.образец определяет базовые значения показателей кач.

4. Технология экспертной оценки качества

4.1 Отбор экспертов

Принцип отбора не является обоснованным, если наблюдается одна из следующих ситуаций:

1. некомпетентность всех или части экспертов по предмету экспертизы;

2. возможная заинтересованность всех или части экспертов в определенном решении;

3. отсутствие в экспертной группировке специалистов, способных рассмотреть объект с определенной стороны, существенной для его оценки;

4. квалиметрическая некомпетентность - отсутствие навыков участия в работе экспертной группы;

5. отсутствие стремления всех или части экспертов принять активное участие в работе.

Способы отбора экспертов делятся на две группы:

1. способы определения первоначального круга экспертов (кандидатов в эксперты). Результаты заносятся в банк данных.

2. способы отбора экспертов из числа этих кандидатов для участия в конкретной экспертизе.

4.1.1 Способы определения кандидатов в эксперты Способы назначения

1) Непосредственное назначение заказчиком экспертизы

Членов экспертной группы назначает ответственное лицо (руководитель организации), по распоряжению которого проводится экспертиза, лично в экспертизе он не участвует.

Достоинства:

§ в число экспертов попадают в основном специалисты, заинтересованные в проведении экспертизы и склонные к коллективной работе;

§ руководитель обязательно назначает авторитетных лиц, решение которых не вызовет сильных возражений у других сотрудников;

§ решение такой экспертной группы будет авторитетно для самого заказчика.

Основной недостаток:

§ эксперт, зная руководителя, может выражать не подлинное суждение, а суждение, соответствующее ожиданиям руководителя.

2) Назначение по выбору эксперта руководителя группы

Руководитель организации назначает только одно лицо - ведущего эксперта. Затем ведущий эксперт подбирает членов экспертной группы, ориентируясь на собственные неформальные критерии. Затем весь состав экспертной группы утверждается приказом руководителя.

Достоинства:

§ удается собрать специалистов, хорошо сработавшимися между собой;

§ в экспертной группе не будет лишних людей, что позволит сэкономить средства и время.

Недостатки:

§ в экспертную группу войдут специалисты одной научной школы, склонные к одностороннему подходу к решению проблемы экспертизы, совпадающему с подходом руководителя группы;

§ руководитель экспертной группы почти наверняка не сможет привлекать к работе экспертов выше себя по служебному положению. Авторитетность этой группы в глазах заказчика будет зависеть только от авторитетности ведущего эксперта.

3) Назначение комиссии, состоящей из руководителей экспертных групп

В организации могут проводиться экспертизы примерно одного и того же назначения. Создается постоянная комиссия из руководителей экспертных групп. Перед очередной экспертизой руководители экспертных групп независимо друг от друга составляют списки кандидатов в эксперты. В экспертную группу включают тех, которые названы большинством руководителей.

Достоинства:

§ в экспертную группу привлекаются необходимые специалисты различного профиля, обеспечивается многосторонность анализа проблемы;

§ перед каждой экспертизой экспертную группу формируют заново, отбирая тех экспертов, которые лучше знают конкретную проблему;

§ личная ответственность эксперта повышена, так как он ожидает критику со стороны представителей других школ. Это обеспечивает взаимный контроль результатов.

Недостатки:

§ продуктивность работы экспертной группы может оказаться невысокой из-за противоречий во взглядах у представителей разных школ. На устранение этих противоречий может уйти значительное время.

§ могут возникнуть трудности со сбором экспертов в одну группу из-за плохой психологической совместимости друг с другом.

Документальные показатели

Документальные способы основаны на использовании показателей, хранящихся в отделе кадров организации.

Основные документальные показатели: стаж работы, возраст, ученая степень, количество научных трудов, изобретений, частота участия в конференциях, количество премий и поощрений по результатам работы и др.

1) Отбор по критерию максимальной авторитетности

В экспертную группу отбирают специалистов, имеющих наилучшие документальные показатели.

Достоинства:

§ созданная экспертная группа обладает максимальной авторитетностью в глазах высшей администрации;

§ независимость суждений экспертов от мнения начальства.

Недостатки:

§ трудно добиться согласования оценок в случае появления разногласий;

§ мала вероятность попадания в экспертную группу инициативных специалистов, способных решать задачи нетрадиционными методами;

§ получила распространение практика покупки дипломов, преподнесения ученых степеней в качестве подарков и т.д.

2) Отбор по условию полноты охвата проблем

Предварительно специалист по организации групповой экспертизы путем консультаций выделяет в объекте экспертизы стороны, анализ которых требует участия представителей разных специальностей. По документальным данным сотрудников организатор производит набор требуемых специалистов.

Достоинства:

§ осуществляется всестороннее рассмотрение объекта экспертизы;

§ по документальным характеристикам удается найти экспертов узкого и широкого профиля. Участие первых обеспечивает подробность анализа, участие вторых - увязку между собой оценок различных свойств объекта.

Недостатки:

§ ввиду невозможности привлечь многих специалистов одного профиля подход некоторых экспертов может быть односторонним;

§ возможна несовместимость некоторых экспертов в группе ввиду их несработанности;

§ не исключено, что организаторы допустят решающую ошибку при выборе совокупности тех сторон, с которых следует рассматривать объект.

Способы взаимных рекомендаций

1) Способ «снежного кома»

Вначале опрашивают одного специалиста по объекту экспертизы. Он должен назвать других лиц, которые по его мнению должны войти в состав экспертной группы. Эти специалисты вновь должны назвать возможных экспертов. Постепенно круг взаимных рекомендаций замыкается: все потенциальные эксперты оказываются названными.

Достоинство: способ позволяет найти коллектив сработавшихся сотрудников независимо от служебного положения. Такая экспертная группа может провести наиболее глубокий анализ качества.

Недостатки: качество резервный квалиметрия эксперт

§ иногда этот способ приводит к слишком большому численному составу экспертной группы. Приходится при опросе вводить правило остановки, либо отбирать тех экспертов, которые рекомендованы большинством;

§ односторонний подход к решаемой квалиметрической задаче (все эксперты принадлежат к одной школе).

2) Способ взаимных выборов

Способ отличается от предыдущего тем, что одновременно с формированием полного списка потенциальных экспертов каждый эксперт знакомится со всем имеющимся на момент опроса списком и отмечает тех кандидатов, с которыми он хотел бы сотрудничать, и тех, сотрудничать с которыми он считал бы нецелесообразным.

При этом возможно образование в списке двух и более подгрупп, в этом случае для экспертизы следует использовать представителей одной подгруппы или проводить работу с каждой подгруппой в отдельности. При этом могут сильно отличаться результаты.

Основной недостаток: лишь некоторые кандидаты в эксперты знакомятся со всем списком, большинство специалистов получает список на стадии его формирования и не могут в полной мере выразить свой выбор.

Способы выдвижения

1) Выдвижение экспертов коллективами подразделений

Выдвижение специалистов может быть проведено коллективами подразделений данных организаций путем открытого или тайного голосования.

Таким способом могут быть отобраны эксперты, пользующиеся всеобщим доверием и уважением независимо от их служебного положения и не обязательно более квалифицированных.

Как показывает опыт, такие эксперты коммуникабельны и хорошо работают в составе экспертной группы. Применяют способ в тех случаях, когда требуется учет факторов, связанных с моралью и этикой. Например: оценка качества работы подразделений с целью премирования лучших экспертов.

Недостаток: узость области применения. Экспертизу, требующую обширных знаний, такая экспертная группа выполнить не может.

2) Выдвижение экспертов заинтересованными организациями (способ «кота в мешке»)

Если решение проблемы экспертизы требует участия представителей различных организаций в разных городах, то выбор экспертов по документальным данным становится практически невозможным.

Для привлечения специалистов обращаются к руководству соответствующей организации с просьбой о командировании представителей с указанием на те характеристики экспертов, которые желательны для участия в данной экспертизе.

Этот способ приводит к появлению в составе экспертной группы специалистов с трудно совместимыми позициями, каждый из них стремится к достижению тех или иных целей, поставленных перед ним руководством.

3) Способ максимального соответствия

Встречаются ситуации, когда члены экспертной группы должны отражать не собственную точку зрения, а позицию определенной категории населения. Целью такой экспертизы является выявление отношения населения (отношение населения к появлению новой продукции или введению нового вида услуг, отношение к сносу и возведению зданий, отношение к изменению природной среды). Цель такой экспертизы - выявить отношение населения к тем или иным решениям.

Предварительно составляется классификация контингента населения по социальным группам, которые могут иметь отличную от других групп позицию по отношению к объекту экспертизы. Эта классификация вручается всем работникам организации, которая проводит экспертизу. Каждый сотрудник должен указать своих коллег, наиболее способных имитировать позицию определенной социальной группы населения.

Трудности способа: При подготовке анкет для опроса при самой классификации групп населения. При рациональной классификации и хорошей организационной работе метод дает хорошо обоснованную оценку.

Достоинство: меньшие затраты времени и средств, чем при использовании социологического метода.

4) Способ «фокус-групп»

Фокус-группа - это 7-10 человек, проводящих дискуссию по заранее составленному плану и направленную на выявление суждений представителей различных социальных групп по квалимитрическому вопросу.

В отличие от способа максимального соответствия фокус-группу формируют из числа представителей общественных организаций, заинтересованных в решении вопроса.

Так как к экспертизе привлекаются лица, не знакомые с такой формой работы, то формирование группы и работа с ней требуют хорошей подготовки организатора.

4.1.2 Способы отбора экспертов из сформированного банка данных по кандидатам

Способы, основанные на использовании коэффициентов компетентности

1) Оценивание со стороны коллег

Экспертов просят указать коллег из числа уже имеющихся в банке, которых наиболее рационально привлечь для оценивания именно данного объекта.

Иногда в литературе упоминают возможность получения оценки компетентности со стороны коллег в виде некоторого балла.

Такие оценки нежелательны по следующим причинам:

1) оценка со стороны коллег может оказаться лишь оценкой взаимоотношения экспертов.

2) сама попытка взвесить компетентность эксперта неэтична как по отношению к оцениваемому специалисту, так и к оценивающему.

Кандидат в эксперты, зная, что его суждениям придают меньший вес, склонен отказаться от участия в экспертизе.

3) нет никаких экспериментальных доказательств, что оценки экспертов, имеющих большие коэффициенты компетентности, точнее или надежнее, чем оценки экспертов с меньшими коэффициентами.

2) Коэффициент компетентности как функция документальных оценок

где k - коэффициент компетентности;

- значения оценок, приписываемых эксперту за определенные документальные показатели;

- коэффициент весомости.

ГОСТ 23554.1-79 «Эксплуатационные методы оценки качества промышленной продукции»

K = 0,4 * Kарг + 0,6 * Kсам, где

Kарг - коэффициент аргументированности. Рассчитывается пропорционально количеству публикаций, конференций и т.д;

Kсам - коэффициент знакомства. Его эксперт назначает его себе сам.

Современная литература не советует опираться на подобные расчеты.

На включение специалиста в экспертную группу могут влиять не общие сведения о документальных показателях, а только те данные, которые относятся к объекту предстоящей экспертизы.

Опыт практической работы свидетельствует, что результативность работы эксперта значительно больше зависит от заинтересованности в результатах работы, добросовестного отношения к работе, чем от введения коэффициентов компетентности.

3) Отбор экспертов по результатам тестирования

Тестирование может осуществляться следующими способами:

1. по результатам решения тестовых задач

Способ целесообразно применять, когда членам экспертной группы предстоит многократно решать однотипные задачи, требующие знания правил, инструкций, юридических положений и т.д.

2. психометрическое тестирование

Применяется в тех случаях, когда для участия в экспертизе требуется некоторый минимум развития психофизиологических функций, например: оценка качества дисплеев ЭВМ.

3. тестирование по результатам оценивания тестового объекта

Группа уже сложившихся экспертов оценивает некоторый объект, затем оценку того же объекта проводят кандидаты в эксперты. По числу совпавших оценок судят о пригодности кандидатов для предстоящей экспертизы.

4) Отбор экспертов по результатам участия в деловых играх

Успешность деятельности игрока в деловой игре фиксируют в виде некоторой суммы выигрыша. По ней судят о его способности исполнять ту или иную должность. Этот показатель может служить и для оценки его способностей исполнять обязанности эксперта.

Достоинство: Деловые игры развивают и тренируют инициативу эксперта и необходимые профессиональные навыки.

Ограничения применения метода:

§ трудно придумать деловую игру, в которой достаточно полно проявились бы все необходимые способности кандидата в эксперты;

§ не всегда специалист, успешно выступивший в деловой игре, так же хорошо проявит себя в реальной обстановке.

5) Использование рейтинга экспертов

В тех случаях, когда специалиста неоднократно привлекают для участия в экспертизе и есть возможность оценить степень соответствия его прошлых оценок истине, можно ввести величину, называемую рейтингом экспертов.

Изначально при включении в банк всем экспертам присваивают одинаковый рейтинг, например, 100 баллов. Если специалист участвовал в некоторой экспертизе и его оценка впоследствии оказалась соответствующей истине, то рейтинг может быть повышен.

Например, за очень хорошую оценку рейтинг возрастает на 5 баллов, а в случае хорошей оценки - на 3 балла.

Ошибочная оценка снижает рейтинг эксперта на определенное число баллов. Изменения рейтинга могут быть введены за предоставляемую экспертом дополнительную информацию (+), за отказ от участия в экспертизе (-).

Спустя некоторое время эксперты приобретают различные значения рейтинга. Дальнейший их отбор может быть проведен с учетом этой величины. Оплата работы экспертов также может зависеть от рейтинга эксперта.

Можно предусмотреть критерии отказа от дальнейшего привлечения специалиста к работе в экспертной группе (например, если его рейтинг ниже 20 баллов).

Отбор экспертов по их самооценке

1) Самооценка по направлению

Если экспертизу поступающих объектов проводят неоднократно и объекты можно разделить на направления таким образом, что экспертиза каждого направления требует привлечения особой группы специалистов, то применяют данный метод..

Организаторы подразделяют всю область возможной экспертизы на направления, и каждый кандидат в эксперты отмечает те из них, в работе по которым он хотел бы участвовать и наоборот. Эти сведения заносят в банк. При поступлении на экспертизу очередного объекта организаторы определяют направление, к которому принадлежит объект и отбирают соответствующих специалистов в экспертную группу.

Достоинства:

§ в экспертную группу попадают специалисты, чувствующие себя уверенно в отношении объекта экспертизы;

§ при условии систематической работы в экспертной группе растет квалификация специалиста как эксперта;

§ способ удобен для автоматизированного отбора экспертов в тех случаях, когда их число велико, и они разобщены территориально.

Недостатки:

§ организатор может неточно определить направления, к которым относятся представленные на экспертизу объекты; экспертная группа окажется неверно сформирована;

§ эксперты, отобранные в соответствии с оценками, полученными задолго до экспертизы, к моменту экспертизы могут изменить ориентацию своей работы и не обнаружить желания участвовать в экспертизе.

2) Самооценка по объекту экспертизы

Кандидатам в эксперты объявляют задачу и знакомят их с объектом предстоящей экспертизы. После этого каждый из них принимает решение, участвовать в работе экспертной группы или нет.

Этот способ лишен недостатков предыдущего способа, но труднее в реализации, так как требуется проведение опроса всех кандидатов, включенных в банк в кратчайшее время. Количество отобранных экспертов может оказаться слишком большим или малым, что потребует дополнительных мер по корректированию состава экспертной комиссии.

Способы, основанные на минимизации расхода ресурсов

Всегда не хватает временных и финансовых ресурсов.

Например, для проведения экспертизы требуется отрывать экспертов от их основной деятельности и оплачивать их работу в экспертной группе или требуется вызывать экспертов из других городов (оплата командировочных). При этом организаторы выбирают прежде всего тех экспертов, которые на момент экспертизы не заняты срочной работой и тех, кто находится поближе.

Достоинство: минимизация ресурса.

Недостатки:

§ возможность появление школ;

§ из-за лимитирования кол-ва экспертов может не оказаться специалистов того или иного профиля и не может быть обеспечен всесторонний анализ объекта экспертизы;

§ результаты работы слишком маленькой экспертной группы может не вызвать доверия со стороны заказчика экспертизы.

4.2 Индивидуальный опрос экспертов

Основная организационная задача опроса экспертов - это создание условий для наиболее полного и свободного от искажений выявления информации, имеющейся у экспертов и создание условий для всестороннего анализа этой информации с разных точек зрения.

При индивидуальном опросе эксперт отвечает на поставленные перед ним вопросы, не взаимодействуя с другими экспертами.

Также существует групповой опрос, когда эксперт отвечает на вопрос в составе группы.

При проведении опроса обычно рекомендуют соблюдать принцип необратимости. Вопросы к эксперту должны быть сформулированы в нейтральной форме, т.е. они не должны подталкивать эксперта к тому или иному варианту ответа. Лицо, проводящее опрос, не должно выражать заинтересованности в том или ином варианте ответа.

4.2.1 Заочное анкетирование

Полная изоляция от других людей (организаторов).

Достоинства способа:

§ способ позволяет достичь наибольшей относительной изоляции экспертов;

§ способ позволяет получить наиболее продуманные ответы.

Недостатки способа:

§ значительные затраты времени;

§ имеет место неполный возврат анкет. Анкеты следует отсылать специалистам, с которыми предварительно проведена беседа и получено их принципиальное согласие на участие в экспертизе;

§ в связи с неполным возвратом анкет возможен эффект селекции: на анкеты будут отвечать преимущественно эксперты, придерживающиеся определенно ориентации по проблеме экспертизы;

§ невозможность своевременно уточнить постановку вопроса, непонятного эксперту.

СТРУКТУРА АНКЕТЫ

Анкета состоит из пояснительной записки и карты опроса.

В пояснительной записке указывается цель анкетирования, на конкретных примерах показывают, как заполнять карту опроса. Объем пояснительной записки должен быть минимизирован ( 1-1,5 страниц).

В карте опроса приводят определенным образом организованный набор вопросов, для каждого из которых предусмотрена своя форма ответа:

1. все возможные варианты приведены в карте опроса, эксперты выбирают наиболее подходящий;

2. ответ имеет количественную форму;

3. эксперты отвечают в свободной форме.

При проведении анкетного опроса важным является порядок расположения вопросов. Вопросы рекомендуется располагать не в случайном порядке, а в зависимости от значений для проблемы экспертизы, по степени общности или так, чтобы обдумывая ответы на первые вопросы, эксперт подготавливался к ответу на последующие вопросы.

4.2.2 Смешанное анкетирование

Способ применяют в тех случаях, когда предстоит разъяснить эксперту многие неясные или нечетко сформулированные вопросы анкеты. Эксперт заполняет анкету в присутствии организатора. Это упрощает подготовку пояснительной записки, позволяет значительно сократить время операции, исключить возможность неполного возврата анкет.

Недостатки:

§ в процессе разъяснения отдельных вопросов организатор невольно ориентирует экспертов на собственное понимание желаемого ответа;

§ в присутствии организатора каждый эксперт может предложить оценки, отличающиеся от тех, которые он предложил бы при обдумывании в одиночестве;

§ в условиях ограниченного времени обдумывание ответов бывает не столь тщательным, как при заочном анкетировании.

4.2.3 Мобильное анкетирование

Способ сочетает в себе смешанное и заочное анкетирование. Его удобно применять, когда число экспертов невелико (до 5 человек). С помощью этого метода удобно производить разработку нормативных документов, в том числе МОК.

Опрос экспертов проводят индивидуально с мобильно меняющимся от эксперта к эксперту составом вопросов. Организатор во время очной встречи разъясняет эксперту цель работы и результаты, достигнутые в процессе предшествующего опроса других экспертов. Затем он передает эксперту полученный к этому моменту материал (фрагменты разрабатываемого документа и вопросы, подготовленные для данного эксперта его предшественниками) для дальнейшей работы.

Опрашиваемый эксперт через определенный срок возвращает организатору разрабатываемый документ со своими уточнениями и вопросами, которые организатор должен передать следующему эксперту.

Лучше, чтобы каждый эксперт не знал, кому поставляются его материалы и от кого он получает вопросы.

Мобильное анкетирование позволяет значительно увеличить объем и качество информации, полученной от экспертов, стимулирует эксперта на проявление максимальной компетентности.

Достоинство: неясные и спорные вопросы эксперт может включить в анкету для последующего специалиста.

Ограничение способа: способ требует больших затрат времени со стороны организатора, ему приходится неоднократно беседовать с каждым экспертом, готовить каждый раз заново карту опроса. Иногда число туров такой экспертизы доходит до 10.

4.2.4 Интервью

Интервью наиболее удобно для организатора, так как не требует ни карты опроса, ни пояснительной записки. Нужен лишь небольшой план и список вопросов, которые организатор собирается задать эксперту. Необязательно в ходе интервью получить ответы на все подготовленные вопросы, следует способствовать максимальному развитию экспертом его мыслей при ответах на те вопросы, которые наиболее глубоко изучены и интересны для эксперта. Не рекомендуется стремиться получить ответы на те вопросы, в которых эксперт чувствует себя неуверенно или не хочет отвечать.

Этим способом можно решить некоторую квалиметрическую задачу в ситуации, когда по условиям работы каждого эксперта можно опросить только один раз в удобное для него время.

4.2.5 Косвенный опрос

Способ применяют в тех случаях, когда по этическим соображениям или по соображениям секретности истинная цель экспертизы не может быть сообщена эксперту.

Опрос выполняют любым из возможных способов. При этом основные вопросы помещают среди других вопросов, подобранных так, чтобы дезориентировать эксперта, создать у него ложное представление о цели опроса.

Недостатки:

§ Благодаря тому, что эксперт не знает истинной цели опроса, он формирует в своем сознании ложную цель и , исходя из нее, отвечает на вопросы. Получив ответы эксперта, заказчик экспертизы не может быть уверен в том, что эксперт дал бы такие же ответы, будь ему известна истинная цель опроса.

§ Значительное время уходит на подготовку опроса, подбор отвлекающих вопросов и смысловой анализ материала.

4.3 Операции с экспертной группой

4.3.1 Общий план групповой экспертизы

Групповая экспертиза заключается в последовательном проведении серии экспертных операций.

Экспертная операция - это организационно выделенный этап работы с группой экспертов, в ходе которого достигается законченное преобразование информации, относящейся к решаемой задаче, из одной формы в другую.

В квалиметрии различают следующие экспертные операции:

· ориентировка;

· генерация;

· назначение оценок;

· коммуникация (обмен информацией между экспертами).

Типичный план групповой экспертизы

Размещено на http://www.allbest.ru/

Пример: Оценивание эстетических свойств товаров в институте технической эстетики.

Экспертиза начинается с анализа представленных материалов, который выполняет ведущий эксперт. Он подбирает данные о мировом рынке оцениваемого товара, выбирает 2-3 эталона для сравнения, составляет предварительный перечень эстетических показателей качества, т.е. готовит ориентирующую информацию.

Исполнитель	Операция
1 Ведущий эксперт	Подготовка ориентирующей информации
2 Эксперты индивидуально	Дополнение и корректировка списка эстетических свойств и показателей
3 Рабочая группа	Обобщение предоставленных экспертами данных, подготовка материалов для обсуждения
4 Группа экспертов	Обсуждение результатов, определение согласованной части назначенных оценок
5 Рабочая группа	Обработка оценок, выявление рассогласованных оценок и спорных вопросов
6 Группа экспертов	Обсуждение спорных вопросов, повторное назначение оценок по остаточным показателям
7 Ведущий эксперт	Утверждение полученных результатов либо их корректировка и возвращение на обсуждение

После ориентировки эксперты индивидуально дополняют и корректируют материалы, представленные ведущим экспертом (операция генерации).

После статистической обработки и назначения оценок рабочая группа вновь выполняет статистическую обработку, выявляя рассогласованные оценки и формулирования нерешенных вопросов. После повторного заседания экспертной группы и достижения согласия ведущий эксперт утверждает результаты либо не согласуются с ними и назначает новое обсуждение.

Повторное осуществление операций обсуждения и назначения оценок называется итерацией.

Благодаря проводимым итерациям создается возможность объединить знания и способности многих специалистов и прийти к согласованному решению.

4.3.2 Ориентировка

Ориентировка состоит в снабжении экспертов информацией по анализируемой проблеме, полученной от заказчика экспертизы.

Как правило, ориентировку проводят один раз - в начале экспертизы.

Операция имеет следующие назначения:

1) уточняется сформулированная заказчиком генеральная цель экспертизы;

2) проверяется принципиальная правильность намеченного пути достижения цели;

3) у экспертов создается определенная ориентация в отношении проблемы и принципам подхода к ее решению.

Формы ориентировки:

1) Краткий доклад по проблеме, сделанный организатором или представителем заказчика

Основное достоинство: простота, поскольку не требуется подготовки информации в письменном виде, распространяемой среди экспертов.

Недостатки:

§ Эксперты могут прослушать, забыть основные положения доклада

§ Эксперты не могут в ходе доклада всесторонне осмыслить задачу и предложить продуманные формулировки цели и способы работы.

2) Ознакомление всех экспертов с печатными материалами о проблеме экспертизы.

Недостатки:

§ Крайне трудно подобрать, обработать и представить в удобной форме весь необходимый объем информации, имеющий отношение к проблеме экспертизы. Весьма возможно, что именно важные для оценивания источники не войдут в состав ориентирующей информации, что решающим образом отразится на работе экспертов.

§ При обработке разнохарактерной информации велика возможность одностороннего субъективного подбора данных. Если представить информацию в необработанном виде, то эксперты могут ее вообще проигнорировать. Рекомендуется вручать экспертам не сами документы, а их аннотированный список, чтобы эксперт мог сам выбрать необходимую ему информацию.

3) Выполнение экспертами определенных домашних заданий (составление докладных записок по проблеме экспертизы, заполнение определенных анкет в ходе которых эксперт вынужден обращаться к специальной литературе).

Недостаток: некоторые эксперты из-за нежелания заниматься самоподготовкой откажутся от участия в экспертизе.

4) Проведение деловой игры

Можно обеспечить освоение всеми экспертами ориентирующей информацией в форме, не приводящей к значительной усталости экспертов. Такой формой является деловая игра. Подготовка деловой игры требует большой работы рабочей группы и занимает значительное время. Способ применяют при неоднократной экспертизе одного и того же назначения.

4.3.3 Генерация

Генерация - это опрос экспертов, предназначенный для получения от них возможно большего числа предложений, идей, факторов, гипотез и других новых сведений, относящихся к предмету экспертизы.

...