Технология критериально-ориентированного тестирования студентов технических вузов по русскому языку и культуре речи

Размещено на http://www.allbest.ru/

Технология критериально-ориентированного тестирования студентов технических вузов по русскому языку и культуре речи

П.И. Образцов,

Б.Г.Бобылев,

И.А.Якунина

Россия. г. Орел, Орловская академия спецсвязи,

Орловский государственный технический университет

В рамках федеральной программы «Русский язык» на 2003 год (научный проект №687) на кафедре русского языка и педагогики ОрелГТУ разработана система критериально-ориентированного тестирования, позволяющая оценить уровень учебных достижений студентов.

Целью представленных тестов является дифференцированное измерение учебных достижений студентов-нефилологов по русскому языку и культуре речи. тестирование учебный язык

В качестве методологической основы настоящих тестов выступает лингводидактическая модель русской национальной языковой личности, разработанная Ю.Н.Карауловым. Данная модель представляет собой систему готовностей вербально-семантического, тезаурусного и мотивационно-прагматического уровней и выступает в роли своеобразного лингвокультурологического эталона, который помогает более строго определить область содержания теста. Операционно-функциональная модель языковой личности обладает большой разрешаюшей диагностической силой и системностью, позволяющей достигнуть высокой степени обобщения учебного материала, обеспечить объективность и надежность теста.

Структура теста разработана на основе государственного образовательного стандарта высшего образования Российской Федерации. В структуре теста выделяется девять тем (разделов), представляющих учебный материал курса в полном объеме.

Разработанные тесты являются критериально-ориентированными, что выражается в их нацеленности на оценку учебных достижений студентов по четырехбалльной шкале: «отлично» (5); «хорошо» (4); «удовлетворительно» (3) и «неудовлетворительно» (2).

Гетерогенность тестов проявляется в том, что в рамках одного теста сочетаются задания, диагностирующие различные уровни развития языковой личности учащихся. Следует указать на то, что курс «Русский язык и культура речи» изначально отличается междисциплинарным, синтезирующим характером, соединяя в себе сведения по ортологии, стилистике, документоведению, риторике.

Девять тем (разделов) курса сгруппированы по трем модулям, содержание и структура которых определяется с учетом операционно-функциональной модели языковой личности. Область содержания данных модулей характеризуется преобладанием различных аспектов развития языковой личности студента. Так, доминирующим аспектом первого и второго модуля является ориентация на формирование языковой компетенции студентов, активизацию ряда готовностей вербально-семантического и тезаурсного уровней их языковой личности, а именно: владение базовой лингвистической терминологией культуры речи, владение орфоэпическими, акцентологическими, орфографическими, лексическими и грамматическими нормами, готовность к различению основных единиц общения, функционально-смысловых типов речи, определению коммуникативных качеств речи, готовность отыскивать, извлекать, понимать и перерабатывать необходимую информацию в учебных текстах (с опорой на ключевые слова, дескрипторы, понятия) и др.

Доминирующим аспектом третьего модуля является ориентация на формирование коммуникативной компетенции студентов, активизацию мотивационно-прагматического уровня языковой личности студентов: готовность учитывать в общении фактор адресата, степень его осведомленности и развития, готовность пользоваться различными конкретными подъязыками и регистрами, готовность различать деловые, научные и публицистические тексты, готовность использовать средства создания коммуникативности, владение основами документоведения и риторики и др.

Отдельные аспекты языковой личности неравновесно отражаются в области содержания тестов. Это связано с ограничениями, которые присущи тестовой форме контроля, не позволяющей по своей природе оценивать в полной мере и с достаточной степенью адекватности деятельностные аспекты формирования человеческой личности, а также с ограничениями, налагаемыми государственным стандартом по русскому языку и культуре речи, в котором не находят отражения ряд аспектов мотивационно-прагматического уровня русской национальной языковой личности (прежде всего - герменевтические готовности).

Разнородные задания, включенные в тесты, представляют учебный материал в полном объеме; в них отражены все разделы дисциплины «Русский язык и культура речи», что позволяет создать условия для проверки всех знаний, умений и навыков, которые должны быть приобретены студентами в ходе изучения курса. При этом тестовые задания однозначно относятся к области содержания теста, они составлены с таким расчетом, чтобы для правильного ответа на задание было достаточнным владение именно тем материалом, изучение которого предусмотрено в курсе.

При разработке гетерогенного критериально-ориентированного теста первостепенное значение имеют такие характеристики заданий, как их дифференцированность, степень обобщенности, наличие главных системообразующих факторов, позволяющих получить многомерные оценки именно тех знаний, умений и навыков студента, которые было запланировано проверить. Сами задания теста представляют собой не вопросы и не задачи, а задания, сформулированные в форме утверждений, которые в зависимости от ответов испытуемых могут превращаться в истинные или ложные высказывания.

Критериально-ориентированный гетерогенный тест по русскому языку и культуре речи представляет собой совокупность трех тестов, соответствующих выделенным модулям учебной дисциплины. В состав каждого теста включена система фасетных заданий различной формы лингвокультурологического содержания, позволяющих качественно оценить структуру и эффективно измерить уровень знаний, умений, навыков и представлений сразу по нескольким разделам курса.

Каждый тест включает в себя двенадцать заданий различной трудности. Определение трудности заданий производится сначала при помощи метода экспертной оценки. Далее статистическая трудность заданий определяется на основе оценки результатов экспериментального тестирования групп студентов, уже изучивших курс «Русский язык и культура речи». Выделяется три уровня трудности. К числу наиболее трудных заданий относятся задания, которые способны правильно выполнить только 15% студентов экспериментальных групп; к заданиям второго и первого уровня трудности относятся те, которые выполняют, соответственно, 50% и 85% студентов.

Каждый критериально-ориентированный тест включает в себя три группы заданий. В его состав входят по пять заданий первого и второго уровня трудности и по два задания третьего уровня трудности.

Задания в тесте располагаются по возрастающей трудности.

По отношению к области содержания гетерогенный тест включает в себя три теста - первого второго и третьего модуля. Каждый тест представлен 30 вариантами, что позволяет охватить индивидуальным тестированием всех студентов одной учебной группы.

Данные тесты предназначены для использования в качестве средства промежуточного контроля. Они позволяют определить степень освоения студентами учебного материала различных разделов курса по ходу их изучения в течение семестра. В каждом промежуточном тесте находит отражение содержание трех разделов (из девяти) курса «Русский язык и культура речи». В целом же использование гетерогенного критериально-ориентированного теста, включающего в себя три промежуточных теста, позволяет оценить уровень сформированности знаний, навыков и умений у студентов за весь курс.

Разделы различаются по количеству позиций (ключевых понятий курса), представленных в них. Темы представлены в тесте пропорционально их удельному весу в курсе: наиболее объемным разделам соответствует большее количество позиций (и, соответственно заданий) и наоборот.

Банк тестовых заданий включает в себя 920 их единиц. Количество заданий первого, второго и третьего уровней, отражающих содержание разделов курса, определяется соответственно их удельному весу в составе критериально-ориентированных тестов.

Одному ключевому понятию в банке соответствует 5 тестовых заданий. Они могут повторяться в тестах не более двух раз.

В промежуточных тестах каждый из разделов курса представлен не менее чем тремя заданиями, соответствующих трем уровням трудности.

Критериальная ориентированность и гетерогенность тестов обусловливает их полиформность. В настоящих тестах используются задания четырех форм, выделяемых в соответствии с классификацией В.С.Аванесова: закрытые и полуоткрытые задания, задания на соответствие, задания на установление правильной последовательности.

В закрытой форме тестовых заданий даются готовые ответы, из которых один является правильным, остальные - неправильные. Выделяются закрытые задания следующих видов:

1) задания с двумя ответами;

2) задания с тремя ответами;

3) задания с четырьмя ответами;

4) задания с пятью ответами.

В представленных тестах используются задания всех четырех видов. Причем, уровень трудности закрытых заданий далеко не всегда коррелируется с уровнем их сложности - количеством ответов в них. По результатам экспертной оценки и статистического анализа ряд заданий с двумя и тремя ответами отнесен ко второму уровню трудности, некоторые же задания с четырьмя и даже пятью ответами относятся к первому уровню трудности. Общее количество закрытых заданий в тестах составляет 60-70%.

Открытые задания в целом характеризуются большей трудностью по сравнению с заданиями закрытой формы. Отвечая на такое задание, студент дописывает ответ на месте прочерка. Открытые задания снижают вероятность догадки, но они отличаются нетехнологичностью, обусловленной возможностью использования студентами различных формулировок ответов. Поэтому в настоящих тестах используются лишь задания полуоткрытой формы, предполагающие дописывание студентом на месте прочерка только одного слова, в редких случаях - одного двучленного словосочетания. Общее количество полуоткрытых заданий в тестах не превышает 4-5% процентов.

Более активно в настоящих тестах используется такая форма, как задания на соответствие (20-25% от общего количества заданий в тестах). Суть этих заданий заключается в необходимости устанавливать соответствие элементов одного множества элементам другого множества, руководствуясь указанием: «Установить соответствие». При оценке ответов студентов по этой форме, в целях выравнивания тестовых результатов, все соответствия каждого задания рассматриваются как единое задание, и если допущена хотя бы одна ошибка, студент получает ноль баллов как не знающий материал в целом.

Для проверки владения алгоритмом умственных и речевых действий, предусмотренным для некоторых видов речевой коммуникации (выступление, беседа, переговоры) а также порядком расположения реквизитов документов используются задания на установление правильной последовательности. Студенту дается инструкция: «Установить правильную последовательность», - в соответствии с которой испытуемый располагает приведенные названия действий или частей текста в необходимом порядке. Количество заданий данной формы составляет в тестах 7-8 %.

Помимо уровня трудности и формы, задания, включенные в предлагаемые тесты, различаются по целеполаганию. При этом выделяются задания, нацеленные на диагностирование следующих знаний, умений навыков: А - умение давать определения; Б - знание законов, принципов, правил; В - умение применять их для решения предложенных примеров; Г - умение находить сходство и различия. На проверку умения А отводится 20 % всех заданий. Б и В - по 30% и Г - 20 %. Оценка надежности и валидности заданий проведена при помощи экспертных и математических методов, а также путем апробации тестов в условиях учебного процесса.

Критерии оценки ответов определены в соответствии с областью содержания, структурой и спецификацией теста, а также в соответствии с требованиями его надежности и валидности.

Для теста из двенадцати заданий, включающего в себя три уровня трудности, оценка удовлетворительно выставляется при условии решения студентом не менее 7 заданий (58% от всех заданий), из них не менее трех заданий второго и третьего уровня.

Оценка «хорошо» выставляется, если студентом правильно выполнено не менее 9 заданий (75%) при условии решения всех заданий первого уровня трудности.

Оценка «отлично» выставляется, если студентом правильно выполнено не менее 11 заданий (91%) при условии решения всех заданий первого и второго уровней трудности.

Выбор данных критериев, наряду со сказанным, обусловлен:

во-первых, потребностью дифференциации тестовых заданий по уровням трудности;

во-вторых, необходимостью сформировать у студентов систему знаний, навыков и умений в соответствии с выбранным коэффициентом (не ниже 0,7, по В.П. Беспалько);

в-третьих, нецелесообразностью установления высшего критерия выполнения теста на уровне 100% , т.к. допускается возможность непроизвольной ошибки со стороны студента.

Учебно-методическая эффективность предлагаемой системы критериально-ориентированного тестирования обусловлена заключенными в ней возможностями осуществления оперативного, репрезентативного и дифференцированного контроля учебных достижений студентов на всех этапах изучения курса «Русский язык и культура речи» в техническом вузе. Использование критериально-ориентированных тестов в учебном процессе позволяет существенно интенсифицировать деятельность преподавателей и студентов, повысить мотивацию студентов технического вуза к изучению русского языка и культуры речи, активизировать когнитивную сферу студентов, развить способность к рефлективному восприятию и осмыслению материала, а при необходимости заменить традиционный экзамен тестовой формой его проведения.

Осуществленный научный проект не имеет аналогов в предметно-дидактической сфере гуманитарных дисциплин, преподаваемых в современных отечественных вузах. Впервые осуществлена учебно-методическая адаптация идей критериально-ориентированного тестирования к предметной области курса «Русский язык и культура речи». При этом были существенно уточнены предметно-дидактические основы данной учебной дисциплины, достигнут достаточно высокий уровень структурирования и обобщения материала на базе использования операционно-функциональной модели языковой личности.

Размещено на Allbest.ru