Размещено на http://www.allbest.ru

Размещено на http://www.allbest.ru

Российская академия народного хозяйства и государственной службы

при Президенте РФ

Смоленский филиал

Кафедра: «МЕНЕДЖМЕНТ»

КУРСОВАЯ РАБОТА

по дисциплине: « Исследование систем управления»

на тему: «Тестирование в исследовании систем управления»

Гаина Е.И.

5 курс, очная форма обучения

52 МО

Смоленск 2013

Содержание

• Введение
• 1. Теоретические основы применения тестирования в исследовании систем управления
• 1.1. Понятие и сущность тестов
• 1.2. Виды тестов и сфера их применения на предприятии
• 1.3. Критерии качества тестов
• 2. Методология и организация тестовых исследований систем управления
• 2.1. Принципы организации и проведения тестирования
• 2.2. Состав и выбор методов тестирования
• 2.3. Последовательность и характеристика этапов тестирования
• 3. Совершенствование управления ООО «Смоленская фанера» на основе тестирования
• 3.1. Организационно-экономическая характеристика ООО «Смоленская фанера» выявление проблем и перспектив его развития
• 3.2. Разработка теста, организация и проведение тестирования
• 3.3. Анализ результатов тестирования и разработка рекомендаций по совершенствованию управления
• Заключение
• Список использованных источников

Введение

Особым методом исследования систем управления, наиболее популярным в современных условиях и, пожалуй, достаточно эффективным является метод тестирования.

В управлении при помощи тестирования можно исследовать проблемы использования ресурсов (в частности, важнейшего из них - времени), уровень квалификации персонала, распределение функций управления, сочетание формального и неформального управления, стиль управления и многие другие.

Тестирование являются достоверным индикатором будущих успехов при исследовании систем управления, и признается универсальным методом в исследования, оно экономически эффективно и способно приносить материальную выгоду предприятию.

Цель курсового исследования - изучить методологию и организацию тестовых исследований систем управления, разработать рекомендации по совершенствованию управления на ООО «Смоленская фанера» на основе тестирования.

Для достижения поставленной цели необходимо решить следующие задачи:

1. Рассмотреть понятие и сущность тестов;

2. Охарактеризовать виды тестов и сферу их применения на предприятии;

3. Изучить критерии качества тестов;

4. Рассмотреть принципы организации и проведения тестирования;

5.Определить состав и выбор методов тестирования;

6. Дать характеристику этапов тестирования.

Объект исследования - тестирование в исследовании систем управления.

Предмет - совершенствование управления ООО «Смоленская фанера» на основе тестирования.

В первой главе курсового исследования речь идет о теоретических основах применения тестирования в исследовании систем управления: приведены виды тестов, сфера их применения на предприятии, критерии качества тестов.

Во второй главе представлены методология и организация тестовых исследований систем управления, в третьей - даны характеристика деятельности организации и рекомендации по совершенствованию управления на основе тестирования.

При написании курсовой работы был использован широкий круг литературы.

Подробно рассмотреть понятие, сущность, виды тестирования помогли учебники таких авторов, как Анастази А., Батаршева А.В., Короткова А.В.; критерии качества тестов - Дураковой И.Б. При исследовании методологии и организации тестирования большую роль сыграли учебные пособия Игнатьевой А.В., Десслера Г. При написании работы использовались следующие журналы: «Управление персоналом», «ЭКО: экономика и организация промышленного производства», «Высшее образование в России».

1. Теоретические основы применения тестирования в исследовании систем управления

1.1 Понятие и сущность тестов

Существует множество определений теста. Тест - это удовлетворяющая критериям исследования эмпирико-аналитическая процедура. Очень общее определение. Но есть определения и более конкретные. Например, тест - это система высказываний, позволяющая получить объективное отражение реально существующих отношений между людьми, их свойств, признаков и количественных параметров. Но можно сформулировать более точное определение теста относительно проблем исследования управления. Тест - это метод изучения глубинных процессов деятельности человека, посредством его высказываний или оценок функционирования системы управления. Сфера применения тестирования не ограничивается только психологической проблематикой [11, с.81].

Большую роль в исследовании систем управления при помощи тестирования играет конструкция теста.

Тест включает набор высказываний и оценок по определённой проблеме или ситуации. Оценки могут быть упрощённые (типа «согласен» - «не согласен» или шкалированные (типа «совершенно верно», «верно», «скорее верно, чем неверно», «трудно сказать» и.т.д.). Шкала может иметь цифровые оценки в виде рейтинговых коэффициентов или выбора степени согласия.

Конструкция теста должна предполагать возможность обработки его результатов по определённым статистическим программам.

Каждый тест имеет ключ, позволяющий обработать полученную информацию в соответствии с целями тестирования [11, с. 81].

В исследовании систем управления при любом психологическом диагностировании на основе выявления психологических свойств личности принимается квалифицированное решение о наличии у испытуемого (клиента) определенного психологического состояния. При психологическом консультировании в исследовании систем управления, прежде чем давать какие-либо советы клиенту, квалифицированный психодиагност должен правильно поставить диагноз, оценить суть проблемы, волнующей клиента.

Состояние клиента тоже определяется как в начале, так и в конце психокоррекционной работы. В эффективности принимаемых коррекционных мер должен убедиться не только экспериментатор, но и сам клиент. Ведь вера в успех является одним из важнейших факторов эффективности любого терапевтического воздействия.

В обоих случаях основными психодиагностическими средствами выступают наблюдение, беседы и тестирование. Тестирование является основным инструментарием практического психолога, специалиста по психодиагностике и находит широкое применение исследовании систем управления [2, с. 12].

Тестирование развивалось и продолжает развиваться нарастающими темпами, оказывая эффективное содействие в решении широкого круга вопросов в различных сферах повседневной жизни [1, с. 16].

История тестирования насчитывает несколько сотен лет. Первые публикации Френсиса Гальтона (1884) и Джеймса Мак-Кина Кеттела (1890) о тестовом методе имели своих сторонников и противников. Многие восторженно приветствовали новый метод. Увидели в нём возможность увязать научные притязания психологии с запросами практики. В целом же статус метода оставался не определён. Между тем в начале 30-х годов тесты в образовании, в сфере профессионального отбора и профессиональной ориентации начинают широко использоваться, не смотря на то, что они не были обеспечены серьёзным психологическим инструментарием. Прошли долгие годы, прежде чем удалось преодолеть методологический тупик в психологии, согласовать теории, концепции, интуитивные догадки с эмпирическими результатами. Особенно важным оказался вывод, что всякий метод несёт в себе неизбежность погрешности измерений.

Современный тест - это теоретически и эмпирически обоснованная система заданий, позволяющая получать измерения соответствующих психологических свойств. Теоретическое обоснование предполагает всесторонний анализ теста и результатов его применения в свете достижения современной науки. Эмпирическое обоснование теста связано с обращением к опыту, измерениям, эксперименту [7, с.132].

Тестирование выступает в качестве одного из основных методов психологической диагностики в исследовании систем управления, позволяющих получать сопоставимые количественные и качественные показатели степени развитости изучаемых психологических свойств или состояний работника на предприятии. Тесты (от англ. test - опыт, проба) - это стандартизированные методики психодиагностики, представляющие собой серию относительно коротких испытаний (задач, вопросов, ситуаций и т. п.). С помощью таких испытаний с известной вероятностью определяется уровень развития у индивида психологических свойств, необходимых теоретических знаний, практических умений, навыков и других личностных характеристик. С помощью тестов можно изучать и сравнивать между собой характерологические свойства различных людей, выставлять дифференцированные и сопоставимые оценки. Тестирование предполагает четкую процедуру сбора и обработки первичных данных, последующий качественный анализ их и интерпретацию. Здесь "первичными" называются данные, полученные в ходе тестирования до их обработки методами математической статистики [2, с. 13].

По форме представления тесты можно разделить на два основных типа: стандартизированные и проективные. Стандартизированные в свою очередь делятся на два подтипа: тест-опросники и тест-задания.

Стандартизированными называются тесты, прошедшие этап стандартизации (проверку на валидность и надёжность, соответствие другим требованиям, предъявляемым к тестам). Такие тесты ориентированы на оценку и могут служить надёжным средством психодиагностики.

Тест - опросник содержит серию вопросов, по ответам на которые судят о психологических качествах испытуемого. В тест - задании испытуемому предлагается серия соответствующих заданий, по итогам выполнения которых определяют наличие или отсутствие и степень развития у него характерологических черт (свойств личности).

Достоинством стандартизированных тестов является возможность дифференцированного их применения (серии стандартизированных тестов разрабатываются применительно к различным возрастным группам людей, уровню образования, жизненному опыту и профессии). С помощью стандартизированных тестов получают количественные оценки, по которым можно сравнивать выраженность психологических свойств испытуемого с их выраженностью в популяции.

Недостатком стандартизированных тестов является определенная возможность влияния испытуемого на результаты тестирования в соответствии с одобряемыми характерологическими чертами личности. Эти возможности увеличиваются, если обучаемые знают содержание теста, а также методику оценки поведения и изучаемых психологических качеств личности.

Другим недостатком стандартизированных тестов является определенная трудность обеспечения индивидуального подхода к испытуемым в процессе тестирования. У людей с пониженной стрессоустойчивостью, как отмечает А.Г. Шмелев, возникают определенные нарушения саморегуляции, они начинают волноваться, ошибаться в элементарных для них вопросах. Во-время заметить такую реакцию на тест - задача, которая по силам лишь квалифицированному и добросовестному экспериментатору [2, с.14].

В определенных условиях применение стандартизированных тестов (тест-опросников и тест-заданий) становится просто нецелесообразным. Это относится к тем случаям, когда испытуемые не желают признавать у себя отрицательные личностные качества и мотивы поведения либо просто не в состоянии осознать их наличие. В этих ситуациях прибегают к использованию проективных тестов.

Проективные тесты предназначены для изучения психологических особенностей людей и их поведения, особенностей, которые вызывают негативное отношение со стороны самих испытуемых. В основе проективных тестов лежит механизм проекции, согласно которому неосознаваемые психологические свойства личности и недостатки поведения индивид склонен приписывать другим людям. О психологических особенностях испытуемого судят на основании того, как он воспринимает и оценивает соответствующие ситуации, поведение людей, какие личностные качества и мотивы он им приписывает.

Проективные методики обладают определёнными достоинствами. Человек в своём восприятии жизненных ситуаций (отображение которых представлено в проективных тестах) преобразует их сообразно своей индивидуальности, своего видения жизненных коллизий. Проективные методики как бы «портретируют» свою индивидуальность человека, не прямо, а косвенным путём позволяют изучать его эмоциональные особенности и невротические реакции [2, с. 15].

Единой классификации проективных тестов не существует. Наиболее распространённой является классификация в разработке Л.Ф. Бурлачука и С.М. Морозова. В сокращённом виде ниже приводится эта классификация по описанию И.Б. Гришпун.

1. Конститутивные тесты. Содержание работы испытуемого является придание смысла материалу, его структурирование. Наиболее популярным конститутивным тестом является тест Роршаха (тест «чернильных пятен»).

2. Конструктивные тесты, предполагающие создание (конструирование) целого из отдельных частей. Среди конструктивных проективных тестов известен так называемый тест мира.

3. Интерпретативные тесты, предполагающие толкование, интерпретацию событий, предлагаемых ситуаций, изображений. Из интерпретативных наиболее популярен «тест тематической апперценции» (ТАТ), созданный в 1935 г. Г. Мюрреем и К. Морганом (США).

4. Катартические тесты, предполагающие творческую деятельность в особо организованных условиях. Ярким примером таких тестов является психодрама, чаще рассматриваемая как метод психотерапии, но выступающая и как психодиагностическое средство. (Предложена Дж. Морено в 1946 г.).

5. Экспрессивные тесты, предполагающие рисование или аналогичную деятельность на свободную или заданную тему. Из экспрессивных методов широко распространены так называемые рисуночные тесты («Нарисуй человека», предложенный К. Маховер в 1948 г.; «Дом-дерево-человек», разработанный Дж. Буком в 1948 г., и др.).

6. Импрессивные тесты, требующие выбора, предпочтения одних стимулов другим. Среди импрессивных проективных тестов наибольшую популярность приобрёл так называемый тест Люшера, или тест цветовых предпочтений (предложен М. Люшером в 1948 г.).

7. Аддитивные тесты, предполагающие завершение фразы, рассказа и др. Среди этих тестов широко известен тест «Незаконченные предложения» [2,с.17].

1.2 Виды тестов и сфера их применения на предприятии

Единой системы классификации тестов в исследовании систем управлении к настоящему времени ещё не выработано. Наиболее распространённой является система деления тестов по предмету диагностирования, т.е. по тому качеству, которое оценивается с помощью предъявляемого теста.

Проективные тесты, о которых говорилось выше, входят в состав личностных тестов, а тесты креативности - в состав тестов способностей.

Тесты достижений конструируются в основном на учебном материале и предназначены для оценки уровней овладения знаниями, умениями и навыками, а также для определения общей и профессиональной подготовки применительно к конкретным предметам и курсам обучения. Как правило, тесты достижений рассчитаны на групповую работу в классе, аудитории колледже, вузе. К тестам достижений относятся также и тесты, используемые для целей профессионального отбора (подбора). Целесообразно применение тестов достижения в целях профориентации молодёжи.

Психологические тесты - это инструменты или, употребляя широкий термин, орудия. Психологические тесты классифицируются по разным основаниям. Наиболее распространённой является деление психологических тестов на виды, при котором в качестве основания взят предмет диагностики. Так, по предмету диагностики психологические тесты делятся на интеллектуальные (тесты интеллекта), тесты способностей, социально-психологические тесты и личностные (тесты личности) [2, с. 20].

Интеллектуальные тесты предназначены для исследования и качественной оценки (измерения) уровня интеллектуального развития индивида. К группе наиболее известных и широко применяемых тестов интеллекта относятся тесты Д. Векслера (предназначены для измерения уровней развития мышления и отдельных когнитивных процессов - восприятия, внимания, воображения, памяти и др.), батареи тестов Станфорд-Бине диапазона способностей - от простого манипулирования до абстрактных рассуждений, дифференцированных по возрастному критерию). Применение этих тестов интеллекта позволяет выявить личностные качества испытуемых: уровни их активности и мотивированности, уверенности, настойчивости, сосредоточенности и др. Среди интеллектуальных тестов они занимают ведущее место в зарубежной психологической диагностике. На основе применения батарей тестов Станфорд-Бине и аналогичных им шкал умственного развития Бине-Симона рассчитываются количественные показатели уровней интеллектуального развития испытуемых (IQ, англ. - Intelligence Quotient). Этот коэффициент (IQ) адекватен понятию «интеллект» и рассчитывается по формуле:

IQ = (Умственный возраст / Хронологический возраст) * 100 (1)

Тесты способностей - это методики, диагностирующие уровень развития общих и специальных способностей, определяющих успех обучения, профессиональной деятельности и творчества. Тесты способностей включают задания не только на интеллект, но и на память, восприятие, ручную и пальцевую моторику. Они широко используются в США для профессиональной ориентации и расстановки кадров в армии, на флоте, в государственных учреждениях.

Разновидностью тестов способностей являются тесты креативности.

Тесты креативности - совокупность методик для изучения и оценки творческих способностей личности [2, с. 22].

Социально-психологические тесты делятся на личностные и социометрические тесты.

Личностные тесты - это психодиагностические методики, направленные на оценку эмоционально-волевых компонентов психической деятельности индивида (отношений, мотивации, интересов, эмоций, особенностей поведения) в определённых социальных ситуациях. С помощью таких тестов выявляются устойчивые индивидуальные особенности человека, определяющие его поступки. Условно личностные тесты по предмету и цели можно разделить на три большие группы. К первой из них относятся многофакторные личностные опросники, дающие разнообразную комплексную оценку степени развитости психологических свойств личности ( 16-факторный личностный опросник Р. Кэттелла (16PF), Миннесотский многофакторный опросник (ММPI). Ко второй группе относятся проективные тестовые методики, разрабатываемые на основе неопределённых стимулов. Испытуемым предлагается интерпретировать, дополнять, развивать эти стимулы. Третью группу составляют тестовые методики, выявляющие отдельные устойчивые особенности личности (темперамент, отдельные характерологические черты личности, мотивационные и эмоциональные проявления и др.).

Социометрические тесты представляют собой своеобразные стандартизированные методики измерения межличностных отношений в малых группах. При ответах на косвенные вопросы испытуемые делают последовательный выбор членов группы, людей, предпочитаемых или отвергаемых в определённых конкретных ситуациях. Такие методики применяют для изучения динамики внутренних межличностных отношений в различных возрастных группах, выявления замкнутых группировок, степени внутригрупповой сплочённости, мотивационной структуры группы и её конфликтных зон [2, с. 23].

Традиционно назначение психологических тестов состояло в том, чтобы измерять различия между людьми или между реакциями одного человека в разных условиях. Одной из ранних проблем, побудивших к разработке психологических тестов, было выявление умственно отсталых. Помимо этого, мощный импульс первоначальному развитию тестов был задан стремлением удовлетворить нужды образования. Имеются в виду знаменитые тесты Бине, с которых и началось интеллектуальное тестирование. В настоящее время школы входят в число основных пользователей тестов. Распределение детей по способностям с целью максимально использовать возможности разных типов школьного обучения, выявление умственно отсталых, с одной стороны, и одарённых учеников - с другой стороны, образовательное и профессиональное консультирование учащихся средних школ и студентов колледжей, отбор в профессиональные и другие специальные школы - вот лишь некоторые примеры использования тестов в образовании [1, с. 17].

Отбор и распределение персонала на промышленных предприятиях - ещё одна важная область применения психологического тестирования. От оператора на линии сборки или делопроизводителя до управленцев высшего звена вряд ли найдётся работа, для которой тестирование не оказалось бы полезным при решении вопроса о найме, распределении обязанностей, переводе на новое место, повышении по службе или увольнении. Эффективное применение тестов в большинстве таких ситуаций, особенно касающихся высококвалифицированной работы, возможно лишь тогда, когда тесты используют в качестве дополнения к специальному собеседованию с кандидатами, создающему условия - в виде биографического контекста - для правильной интерпретации тестовых показателей конкретного кандидата. Тем не менее, тестирование составляет важную часть полной программы управления трудовыми ресурсами [1, с. 17].

Тесты обычно используются в качестве вспомогательных средств при принятии решений, связанных с профессиональной деятельностью, включая индивидуальное профконсультирование и решения руководителей организаций, касающиеся подбора и расстановки кадров. Соответствующие структуры торгово-промышленного сектора, правительственных учреждений всех уровней, от федерального до местного, и различных родов войск используют практически все доступные виды тестов для принятия кадровых решений. Нередко комплексные батареи способностей и тесты специальных способностей разрабатывались именно для подобного применения, как и ситуационные тесты. Всё большее применение в этой сфере находят личностные и биографические опросники [1, с. 535].

Весьма близкое по целям применение психологического тестирования имеет место в вооружённых силах при отборе и распределении военнослужащих.

Использование тестов в индивидуальном консультировании постепенно расширилось от узконаправленных советов относительно учебных и профессиональных планов до рассмотрения всех аспектов жизни человека. Усиливается использование тестов для улучшения самопонимания и личностного роста. Совершенно очевидно, что тесты применяют при решении широкого круга практических проблем. Однако не следует забывать и о том, что такие тесты - важное средство фундаментальных исследований. Психологические тесты служат стандартизированными инструментами исследования разнообразных проблем при исследовании систем управления.

1.3 Критерии качества тестов

К тестам предъявляются определённые требования. Основными из них являются валидность, надёжность, наличие тестовых норм, социальная адаптация тестовых методик.

Определяя одинаковые для всех психологических методов диагностики пригодности критерии, Г.Шанц, например, не выделяет особо тестирование, считая, что оно - по показателям качества - должно вписываться в сравнимый- пятиэлементный - ряд других инструментов отбора:

- надежность;

- валидность;

- объективность;

- экономичность;

- полезность [4, с.114].

Валидность (англ. valid - действительный, пригодный, имеющий силу) - один из важнейших критериев качества теста, означающий пригодность теста для измерения того, что он по замыслу должен измерять; или иначе: соответствие тестовой методики измеряемому концепту. Если, например, проводится тестирование испытуемых на определение их интеллектуальных способностей, то вряд ли целесообразно с помощью одного и того же теста оценивать еще и типы их темперамента. Проверка теста на валидность включает ряд процедур, главными из которых являются процедуры валидизации (валидации). Определяется валидация посредством корреляции результатов тестирования с успешностью выполнения соответствующей деятельности. К примеру, если с группой испытуемых проведено тестирование на определение общих способностей, то процесс валидации можно представить как установление корреляционных связей полученных данных тестирования с результатами обследования этих же испытуемых на предмет выявления общих способностей по другим проверенным и надежным методикам. Валидность считается достаточно высокой, если коэффициент корреляции будет более 0,6. При значении коэффициента корреляции 0,45-0,65 валидность считается вполне удовлетворительной [2, с. 54].

Надёжность - один из важных критериев его качества, относящегося к точности психологических измерений. Чем выше надежность теста, тем относительно свободнее он от погрешностей измерений. Надежность теста рассматривается как устойчивость (стабильность) результатов при повторном тестировании на той же выборке испытуемых. Повторное тестирование обычно проводится через две недели после первого тестирования. Считается, что при коэффициенте корреляции более 0,75 уровень надежности теста вполне приемлем.

Каждый тест следует сопровождать сведениями о его надёжности. Сообщаемая мера надёжности характеризует тест только в случае его проведения в стандартных условиях и с людьми, имеющими сходство с теми, кто входил в состав нормативной выработки. Следовательно, при описании теста нужно точно указывать и характеристики этой выборки, вместе с типом измеренной на ней надёжности.

Теоретически, разновидностей тестовой надёжности может быть очень много, однако практическое применение находят лишь несколько типов надёжности. Поскольку все типы надёжности касаются степени согласованности или соответствия между двумя независимо полученными множествами показателей, их все можно выразить в виде коэффициента корреляции, который способствует измерению надёжности теста.

Существуют приёмы проверки надёжности тестов. Они включают повторное тестирование, параллельное тестирование, приём раздельного коррелирования (внутренняя корреляция высказываний), использование дисперсионного анализа, факторный анализ [11, с. 82].

Выделяют следующие типы надёжности:

ретестовая надёжность (самый очевидный и понятный метод определения надёжности результатов теста - его повторное проведение;

надёжность взаимозаменяемых форм (один из способов избежать трудностей, с которыми приходится сталкиваться при определении ретестовой надёжности, - использование взаимозаменяемых форм теста);

надёжность эквивалентных половин теста (меру надёжности можно определить и на основании однократного применения единственной формы теста, пользуясь для этого различными процедурами расщепления теста на две равноценные половины) и др. [1, с. 114].

Надежность (достоверность) тестирования формально выводится из аксиом классической теории тестов. Исходным пунктом является предположение, что дисперсия наблюдаемых значений суммарно составлена из дисперсии истинных значений и дисперсии ошибок:

(2)

Путем ряда преобразований далее показывают, что достоверность теста изображается формулой:

(3)

Достоверность, соответственно, равна доли истинной дисперсии от общей дисперсии. Если общая дисперсия безошибочна, достоверность достигает максимального значения 1. При практическом нахождении достоверности появляется проблема невозможности эмпирически обнаружить оценки, которые встречаются в вышеприведенных равенствах. Для возможности определения величины ошибки и этим - величины истинной оценки как вспомогательная конструкция вводится понятие параллельного, или эквивалентного измерения. Два измерения называются параллельными, если их истинное значение и дисперсия значений ошибок одинаковы, отсюда также следует, что при параллельных измерениях ожидаемые оценки(среднее значение) и дисперсия наблюдаемых оценок одинаковы. С помощью этого предположения можно показать, что соотношение между двумя параллельными измерениями (rx, y) как раз соответствует определению достоверности, а именно равно отношению истинной дисперсии к наблюдаемой:

(4)

Таким образом, достоверность инструмента теста можно определить в обход двух параллельных измерений.

Формулу 3 можно преобразовать:

(5)

Используя формулу (1) получаем:

(6)

Или (7)

Значение, выведенное из равенства достоверности, называется стандартной ошибкой текста. Она выявляет среднее отклонение ошибки от истинного значения [4, с.117].

Проблемы валидности и надежности тесно взаимосвязаны. Однако валидность рассчитывается относительно объекта исследования (применительно к испытуемым), надежность же - относительно предмета психодиагностического исследования (психологических свойств или черт личности).

Надежность не обязательно предполагает валидность. Она является необходимым, но недостаточным условием валидности. Справедливо следующее неравенство: валидность надежность. Это означает, что валидность теста не может превышать его надежность [2, с. 54].

Под объективностью понимается степень, в которой результаты тестирования не зависят от проверяющего. Объективность налицо, если разные исследователи одного проверяемого пришли к идентичным результатам [4, с.114].

Норма теста определяется в результате тестирования большой выборки испытуемых определенного возраста и пола с последующим усреднением полученных oценок и дифференциацией по ряду релевантных показателей. Согласно Р.С Немову, норма теста - это средний уровень развития большой совокупности людей, похожих на данного испытуемого по ряду социально-демографических характеристик.

Понятие «норма теста» связано с понятием «репрезентативность». Репрезентативность (франц. representatif - показательный) - свойство выборочной совокупности представлять характеристики генеральной совокупности. Репрезентативность означает: с некоторой наперёд заданной или определённой статистической погрешностью можно считать, что представляемое в выборочной совокупности распределение изучаемых признаков соответствует их реальному распределению [2, с. 55].

Для установления нормы теста и стандартизации тестовой методики требуется предварительно определить обоснованность выборки и провести статистические расчеты по определению их репрезентативности. Операции по анализу и расчету тестовых норм (а следовательно, и проверке их на репрезентативность) проводятся с использованием математических методов (в основном на компьютере). В случае негативных результатов (отсутствия устойчивых тестовых норм) прибегают к обследованию более широкой выборки или отказываются от плана использования данного теста.

Всякие нормы со временем, как правило, изменяются в соответствии с изменяющимися условиями социально-культурной жизнедеятельности людей. Р.С Немов отмечает, что «нормы интеллектуального развития, установленные в первой четверти нашего века, не подходят для его последней четверти, так как за это время уровень развития мышления людей значительно вырос». В соответствии с установленным среди психологов правилом один раз в пять лет нормы теста, особенно интеллектуального, должны пересматриваться.

Валидность, надежность, соответствие тестовым нормам (репрезентативность) являются основными требованиями психометрии. Их объективный характер, возможность перепроверки результатов тестирования являются гарантией достоверной психологической информации.

Социальная адаптация тестовых методик - данное требование выдвинуто сравнительно недавно. И связано это с необходимостью адаптации тестовых методик, заимствованных из других стран, к новым региональным и социальным условиям. Р.С Немов по этому поводу пишет: "Если, например, созданный в Европе тест интеллекта впервые применяется в стране, где доминирующим в структуре интеллекта является не словесно-логическое, а образное или практическое мышление, то он обязательно должен быть социокультурно адаптирован. В противном случае, применяя его в первоначальном, неадаптированном варианте, мы, скорее всего, получим низкие результаты, которые не будут соответствовать уровню развития мышления у жителей данной страны».

Работа по переоценке тестовых методик по своему объему фактически соответствует конструированию оригинальной методики. « С этой точки зрения заимствование зарубежных общедиагностических тестов способностей, черт характера, интересов и т.п. вовсе не оказывается кратчайшим путем к психодиагностике. Этот путь кажется короче только тем, кто сознательно или по неведению пренебрегает принципами психометрики» [2, с. 56]. Таким образом, применение тестирования в исследовании систем управления является достаточно важным моментом.

Тестирование - исследование высказываний, позволяющих получить объективное отражение свойств и количественных параметров деятельности людей. Тест - система высказываний или оценок по комплексу вопросов, в которых закодирована какая-либо проблема.

В управлении при помощи тестирования можно исследовать проблемы использования ресурсов (в частности, важнейшего из них - времени), уровень квалификации персонала, распределение функций управления, сочетание формального и неформального управления, стиль управления и пр. Тестирование составляет важную часть полной программы управления трудовыми ресурсами. Наиболее полно сущность тестов раскрывается в их классификации. Большую роль в исследовании при помощи тестирования играет конструкция теста. Тест включает набор высказываний и оценок по определённой проблеме или ситуации. При составлении теста необходимо учитывать его основные характеристики: валидность, надежность, соответствие тестовым нормам.

К побочным критериям качества тестов относятся:

- нормируемость;

- сравнимость;

- целесообразность(полезность);

- экономичность.

2. Методология и организация тестовых исследований систем управления

2.1 Принципы организации и проведения тестирования

При исследовании систем управления важную роль играет организация и проведение тестирования.

Система управления - это совокупность двух взаимодействующих подсистем (управляющей и управляемой - объект управления), образующих новую систему - систему управления. Эффективность управления системой рассматривается как степень достижения цели функционирования [9, c.4].

Система управления предприятием должна отвечать современным рыночным условиям:

· обладать высокой гибкостью производства, позволяющей быстро менять ассортимент изделий (услуг). Это обусловлено тем, что жизненный цикл продукции (услуг) стал короче, а разнообразие изделий и объём выпуска разовых партий - больше;

· быть адекватной сложной технологии производства, требующей совершенно новых форм контроля, организации и разделения труда;

· учитывать серьёзную конкуренцию на рынке товаров (услуг), в корне изменившую отношение к качеству продукции, потребовавшую организовать послепродажное обслуживание и дополнительные фирменные услуги;

· учитывать требования к уровню качества обслуживания потребителей и времени выполнения договоров, которые стали слишком высокими для традиционных производственных систем и механизмов принятия управленческих решений;

· учитывать изменение структуры издержек производства;

· принимать во внимание необходимость учёта неопределённости внешней среды.

Для решения представленных проблем существует объективная необходимость в исследованиях, анализе существующего положения [9, c.4].

При проведении тестирования следует использовать следующие методологические принципы:

1. Проблема - это противоречие, которое предстаёт нам иногда в качестве абсурда (неожиданно, непривычно, необъяснимо, нелогично, абстрактно). Методология работы с проблемой обеспечивает качественное планирование исследования, и его организацию.

2. Принцип оценки: любые события, явления, противоречия мы оцениваем по критериям важности, объективности, актуальности, связи с другими явлениями, сложности.

3. Принцип распознавания. Всегда возникает необходимость отождествления, сравнения, определения класса явления, принадлежности к определённой типологической группе. Это позволяет глубже понять новое явление, определить его свойства и характер, сделать оценку более существенной.

Методологические принципы исследования помогают найти эффективный вариант его проведения, целенаправленного осуществления. Принципы - это правила деятельности, которые её, с одной стороны, ограничивают, а с другой стороны - поддерживают, потому что они отражают концентрированный опыт успешного исследования [5, с. 18].

Организация проведения тестирования во многом зависит от верного подбора и соблюдения принципов тестирования. К основным принципам тестирования, которые находят своё применение в исследовании систем управления, относятся принципы действенности и достоверности.

Действенность теста - точность, с которой тест, интервью и т.п. оценивает то, для чего он был разработан, или выполняет предопределённую ему функцию. Действенность отвечает на вопрос: «Оценивает ли этот тест то, для оценки чего он был предназначен?». Действенность теста всегда определяется по тому, что он оценивает. При найме на работу термин «действенность» означает, что тест относится к выполнению данной работы, другими словами, что результаты теста должны дать представление о способности человека выполнять определённую работу. Если это не подтверждается, то дальнейшая проверка не имеет никакого смысла. Тестирование характеризуется двумя основными параметрами, показывающими его действенность: эффективностью критериев и действенностью содержания [3, c. 100].

Эффективность критериев - эффективность, основанная на том, что баллы теста (прогноз) связаны с уровнем исполнения (критерий). Эффективность критериев указывает на то, что тест («прогноз») находится в соответствии с требованиями, предъявляемыми к данному виду деятельности («критерий»). Демонстрация действенности критериев предполагает доказательство того, что те, кто успешно проходят испытания, хорошо работают, и наоборот. То есть тест действенен, если люди, набравшие большее количество очков при тестировании, наилучшим образом соответствуют данной деятельности. С точки зрения психики, прогноз - это оценка, которую вы стараетесь связать с критерием - выполнение реальной работы.

Действенность содержания - тест, содержание которого эффективно, содержит ряд задач и навыков, действительно необходимых для выполнения рассматриваемой работы.

Действенность содержания - набор задач и навыков, включённых в тест, необходимых для выполнения рассматриваемой работы.

Основная задача - определить содержание работы в виде поведенческих стереотипов, затем случайным образом осуществить набор этих задач и образцов поведения и включить их в тесты. Примером служит тест на скорость печатания при найме машинистки. Если этот тест - достоверный образец работы машинистки, то он, возможно, содержательно действенен.

Доказательство содержательной действенности теста на практике сложнее, чем в теории. Доказать, что задания, предлагаемые испытуемым при тестировании, на самом деле являются образцом задач, выполняемых в процессе реальной работы, и что условия тестирования адекватны реальным рабочим условиям, не всегда легко [5, c. 197].

Помимо действенности имеется другая важная характеристика теста - достоверность.

Достоверность - постоянство баллов, набранных одним и тем же человеком при повторном тестировании с теми же эквивалентными тестами.

Достоверность теста оценивает его устойчивость, т.е. постоянство результатов, полученных одним и тем же испытуемым при повторном прохождении подобного или похожего теста.

Существует несколько способов оценки стабильности или достоверности теста. Например, человеку делается один и тот же тест в два различных момента времени и результаты сравниваются. Это называется оценкой повторного тестирования, это означает, что во второй раз предоставляется эквивалентный тест. Это называется эквивалентной оценкой. Другой способ определения достоверности теста - определение его внутренней устойчивости [16, c. 197].

Выделяют также следующие принципы тестирования.

1. Принцип научной обоснованности предполагает высокий научный потенциал тестирующего, его профессиональную практическую подготовку на основе профессионально-этических стандартов в области тестирования. Соблюдение этого принципа способствует устранению ошибок диагноста и артефактов (искусственных, ложных фактов, полученных в результате неправильного применения тестовых методик).

2. Принцип обеспечения суверенных прав личности испытуемых означает исключение обманного пути в тестовом исследовании систем управления. Это принцип охраняет право индивида отказываться от участия в тестировании, защищает тайну его личности.

3. Принцип объективности выводов предусматривает беспристрастный подход к результатам тестирования со стороны пользователя. На него не должны оказывать влияние общее впечатление о личности обследуемого, симпатии и антипатии, субъективное состояние и настроение.

4. Принцип эффективности предлагаемых рекомендаций обеспечивает соблюдение соответствующих мер предосторожности, направленных против неправильного использования и неверной интерпретации полученной информации, передаваемой испытуемому.

5. Принцип конфиденциальности предполагает предоставление информации только тем, кому она предназначается.

6. Принцип профессиональной тайны обеспечивает неразглашение содержания тестовых методик и результатов их применения без персонального согласия того лица, которое было обследовано [2, с. 68].

В обще виде морально-этические нормы могут быть представлены в виде правил, которые должны соблюдать любые пользователи тестирования.

1. Тестирование должно проводиться при участии профессионального психолога - специалиста по психодиагностике или при последующем его участии в качестве консультанта.

2. Человека нельзя подвергать обследованию против его воли или обманным путём. Человек, если это не оговорено законом, имеет право знать результаты своего тестирования испытуемый должен быть информирован о целях тестирования и способах использования его результатов.

3. Тестирующий должен обеспечить конфиденциальность информации, полученной от испытуемого на основе «личного доверия».

2.2 Состав и выбор методов тестирования

В настоящее время практика тестирования насчитывает множество методических приёмов и подходов использование которых позволяет решать множество проблем в сфере управления предприятием.

Более изощрённые в методологическом отношении исследования последних двух десятилетий оказали существенную поддержку применению тщательно сконструированных личностных тестов при принятии кадровых решений в разнообразных контекстах. Важный и ещё недостаточно исследованный вопрос касается определения наиболее релевантных измерений личности по отношению к конкретным специальностям или семействам специальностей. Например, в то время как одни виды работы могут требовать высокой степени общительности, другие требуют от работника прямо противоположного качества [1, с. 398].

Пытаясь добиться систематической классификации черт личности, некоторые специалисты обратились к факторному анализу. Этот метод идеально подходит для сокращения числа категорий, необходимых для объяснения поведенческих феноменов путём поиска устойчивых паттернов в их появлении. Существует множество способов применения факторного анализа в исследовании черт личности. Один из этих способов сосредоточен на использовании данных личностных вопросников, иллюстрируется серией исследований Гилфорда и его сотрудников. Вместо того чтобы коррелировать суммарные показатели по существующим опросникам, эти исследователи вычисляли интеркорреляции между отдельными пунктами из многих личностных опросников. В качестве промежуточного продукта данного исследования были разработаны три личностных опросника, объединённые со временем в один инструмент - Гилфорда-Циммермана обследования темперамента. Этот опросник даёт отдельные показатели для 10 черт, а каждый показатель основывается на 30 разных пунктах. Примеры этих черт включают сдержанность, доминирование, эмоциональную устойчивость и дружелюбность.

Значительная часть текущих исследований сосредоточена на выяснении полезности «Пятифакторной модели» структуры личности - в её различных формах - для предсказания критериев выполнения работы.

«Пятифакторная модель» (Fife-Factor Model или сокращённо, FFM) символизирует необычайный уровень согласия среди исследователей личности, принадлежащих к самым разным школам факторно-аналитических исследований. Конкретный вид, в котором эта модель представлялась, послужил причиной серьёзной её критики. По существу, FFM - это попытка использовать иерархическую модель анализа с целью упростить ставшую необозримой коллекцию данных об эмоциональном поведении индивидуумов. Следовательно, она предоставляет информацию, с которой легче работать при оценивании конкретных людей и прогнозировании их поведения в отдельных ситуациях. Факторы этой модели являются описательными, а не объяснительными, и они не относятся к разряду тех, что лежат в основе отдельных заданий или специфических тестов, из которых они извлечены.

Хотя некоторые исследователи на протяжении последних лет сходились во мнении, что пять факторов - как раз то число, которое необходимо для объяснения большинства корреляций между огромным количеством дескрипторов личности, наиболее подходящее для конкретных целей число факторов было бы лучше охарактеризовать как 52.

Согласно данной модели выделяют пять главных областей исследования: нейротизм, экстраверсия, открытость опыту, уживчивость, сознательность [1, с. 399].

Популярность рассматриваемой модели в исследованиях отбора персонала не случайна. В конце концов, эти пять (2) факторов были извлечены в результате обработки обширных массивов данных описания личности и представляют собой модель для характеристики нормальных личностей, в отношении которой существует довольно высокая степень согласия среди специалистов. Каждая из областей, охватываемых данной моделью, широко применима ко всем видам повседневного поведения, включая выполнение профессиональных обязанностей. Например, измерение «Эмоциональная устойчивость» является существенным в работе, связанной с быстрым принятием решений в условиях психического напряжения, такой как охрана правопорядка, скорая медицинская помощь и т.д. С другой стороны, «Уживчивость» является совершенно необходимым качеством для любой работы, которая предполагает широкие контакты с людьми. Впрочем, неудивительно, что именно фактор «Сознательность» выявился в целом ряде метааналитических исследований как наиболее универсальный и существенный личностный предиктор выполнения работы. Тем не менее, пока ещё далеко до полного согласия как по поводу определения конструкта «Сознательность», так и в отношении признания его первенства [1, c. 554].

На современном этапе развития практика тестирования обладает достаточно большим количеством разнообразных проективных методик. Главную отличительную особенность проективных методик нужно искать в относительно неструктурированной задаче для испытуемого, т.е. задаче, допускающей почти неограниченное разнообразие возможных ответов. Одна из самых популярных проективных методик связана с использованием чернильных пятен Роршаха, который был первым, кто применил чернильные пятна для диагностического исследования личности в целом. Ещё одной методикой подобного типа является комплексная система Экснера, который разработал комплексную систему, объединившую элементы, отобранные из пяти основных подходов к оценке результатов соответствующего теста. В этой комплексной системе Экснер предлагает стандартизированные процедуры проведения, подсчёта показателей и интерпретации, отобранные на основе эмпирических сравнений разнообразных способов. Главное значение здесь придаётся не содержанию, а структурным переменным. Согласно Экснеру, цель обработки ответов - получение структурной сводки, которая образует ядро его системы и служит основой для большинства интерпретационных постулатов.

Серьёзная попытка придать методике чернильных пятен психометрическую направленность была предпринята Уэйном Хольцманом [1, с. 454].

Хотя все обсуждавшиеся до сих пор проективные методики требуют вербальных ответов, среди методик этой группы есть и полностью вербальные, т.е. использующие слова и в качестве стимульного материала, и в ответах. Часть таких вербальных методик может применяться как в устной, так и в письменной форме, но все они пригодны для письменного предъявления при групповом тестировании.

Методикой, опередившей волну проективных тестов является тест словесных ассоциаций, эта методика впервые была описана Гальтоном. Процедура проведения теста состоит в предъявлении испытуемому серии не связанных между собой слов, на каждое из которых его просят отвечать первым пришедшим на ум словом. Первые психологи-экспериментаторы, так же как и первые тестологи, работавшие с умственными тестами, видели в таких ассоциативных тестах средство для изучения процессов мышления.

Другая вербальная проективная методика - завершение предложений - широко используется как в научных исследованиях, так и в клинической практике. Примером такой широко используемой формы является Бланк незаконченных предложений Роттера, состоящий из 40 основ предложений. Множество других тестов завершения предложений разработано для оценки различных изучаемых популяций и для применения в разнообразных областях научных исследований и психодиагностики. Некоторые интересные современные разработки в этой области включают инструменты, предназначенные для обнаружения симуляции при освидетельствовании на предмет нетрудоспособности, предсказания эффективности управления и оценивания таких конструкторов, как защитные механизмы; эти инструменты могут быть полезными и при оценке личности.

Методики действия являются достаточно широкой и аморфной категорией проективных методик, которая включает довольно много форм относительно свободного самовыражения. Отличительной особенностью всех этих методик является то, что они использовались и как терапевтические, и как диагностические процедуры. Считается, что благодаря предоставляемым ими возможностям выразить себя, человек не только обнаруживает свои эмоциональные затруднения, но и облегчает свои страдания. К наиболее часто используемым методам из этой категории относятся методики рисования и игровые методики.

Оценочной процедурой, особенно полезной при сборе мнений равных по положению людей, является методика выдвижения кандидатур. когда эта методика используется для индивидуальной оценки, количество выборов, полученных любым отдельным человеком, может распознать потенциальных лидеров (получивших много выборов), равно как и членов группы, оказавшихся в изоляции (редко или совсем не упоминавшихся) [1, с. 510].

Достаточно распространённой является методика вынужденного выбора, которая в своей сущности требует от респондентов сделать выбор между двумя описательными терминами или фразами, которые выглядят одинаково приемлемыми, но различабтся валидностью. Задания, построенные по типу вынужденного выбора, могут состоять из 3,4 или даже 5 пунктов. В таких случаях респонденты должны указать, какая из фраз является для них наиболее, а какая наименее характерной. В ещё одном варианте требуется выбрать между двумя контрастирующими ответами в рамках одной и той же черты, оцениваемыми по единой шкале. Преимущество данной методики заключается в том, что она обеспечивает получение нормативных, а не ипсативных показателей, и потому не накладывает искусственных ограничений на взаимосвязи между разными шкалами. В качестве примера можно назвать Индикатор типов Майерс-Бриггс.

...