Дистанционный компьютерный контроль знаний: практика проведения и анализ результатов

Размещено на http://www.allbest.ru/

Дистанционный компьютерный контроль знаний: практика проведения и анализ результатов

Н.Н. Морозова

Чебоксарский институт МГОУ, Чувашская Республика

Дистанционные формы организации обучения и контроля находят все большее применение в практике работы высших учебных заведений. Создаются специализированные центры, которые занимаются разработкой тестов и организацией дистанционного тестового опроса в вузах и других учреждениях профессионального образования. При организации тестового опроса возникает множество проблем от содержания теста, до времени, отводимого на один вопрос. Безусловно, содержание должно соответствовать ГОС ВПО, но подбор конкретных заданий может быть на разных уровнях сложности. Интерфейс, удобство навигации и другие нюансы при работе с компьютерными тестами, все это влияет на результаты опроса. В данной статье проанализированы результаты дистанционного компьютерного опроса, проведенного в 2006 году в Чебоксарском институте (филиал) МГОУ по тестам, разработанным ООО ”Независимый Центр тестирования качества обучения” (г. Москва, www.ast-centre.ru) и ФГУ “Национальное аккредитационное Агентство в сфере образования” (г. Йошкар-Ола, www.fepo.ru). Кроме того, проведено сравнение результатов компьютерного тестового опроса с письменным тестовым опросом преподавателя.

Были проверены остаточные знания студентов всех специальностей и всех форм обучения по дисциплине «Математика». Кроме того, был проведен письменный опрос по тестовым вопросам и заданиям, составленным преподавателями кафедры высшей и прикладной математики ЧИ (филиал) МГОУ. Особенности заданий, порядка проведения и проверки тестов представлены таблицей.

Особенности заданий, порядка проведения и проверки дистанционных компьютерных тестов

дистанционное обучение контроль опрос математика

Проанализируем содержание теста Независимого Центра тестирования качества обучения (г. Москва). Тесты состоят из тестовых вопросов и заданий. Так как тестовый вопрос требует от студента только знание того или иного факта, изложенного в учебнике; ответ на тестовый вопрос может быть дан сразу путем выбора из предложенных вариантов ответов.

Например. Тестовый вопрос: Необходимым условием локального экстремума дифференцируемой функции в точке является…..

Возможные варианты ответа:

Правильный ответ:

А в тестовом задании ответ на него может быть дан только после выполнения студентом некоторых дополнительных действий, связанных с вычислениями, выполнением логических операции, выбором формул, построением чертежей.

Например. Задание: В треугольнике АВС, где А=(7,8), В=(19,12), С=(11,20), угол при вершине А равен……

Возможные варианты ответа:

Правильный ответ:

Тестовые задания различны по степени трудности. Для решения одних достаточно знать и применить одну формулу.

Например. Задание: Математическое ожидание случайной величины Х, заданной плотностью распределения

, равно……

Возможные варианты ответа: 1, 9/4, 27/2, 27/5, 3/2.

Правильный ответ: 9/4.

Для решения других заданий кроме знания формулы необходимо знать и уметь строить графики различных функций.

Например. Задание: Площадь фигуры, ограниченной линиями , равна……

Возможные варианты ответа:7/6, 5/3, 1, 3/2, 4/3.

Правильный ответ: 1.

На наш взгляд, в тесте есть задание, не удовлетворяющее обязательному требованию: все варианты ответа должны быть правдоподобны и “неразличимы для глаза” при отсутствии знаний.

Например. Задание: Определитель матрицы равен…….

Возможные варианты ответа: 115, 25, 50, .

Правильный ответ: 25.

Вариант ответа легко отбрасывается на основе знания - определитель это число. Фактически вопрос теста превращается в троичный (3 правдоподобных варианта ответа).

Тесты Национального аккредитационного Агентства в сфере образования (г. Йошкар-Ола) также состоят из тестовых вопросов и заданий.

Например. Вопрос: Нормальный вектор плоскости имеет координаты…..

Возможные варианты ответа: (1;-4;-8), (1;-4;8), (1;-4;-3), (-4;-8;-3).

Правильный ответ: (1;-4;-8).

Задание: В первой урне 3 белых и 7 черных шаров. Во второй урне 5 белых и 15 черных шаров. Из наудачу взятой урны вынули один шар. Тогда вероятность того, что этот шар окажется белым, равна…..

Возможные варианты ответа: 4/15, 11/40, 11/20, 13/40.

Правильный ответ: 11/40.

Кроме того, в тесты включены тестовые задания с практическим содержанием.

Например. Задание для студентов экономических специальностей: Даны функции спроса и предложения , где -цена товара. Тогда равновесная цена равна….

Возможные варианты ответа: 3,5; 4,5; 1; 2,25.

Правильный ответ: 1.

Задание для студентов технических специальностей: Закон движения материальной точки имеет вид , где - координата точки в момент времени . Тогда, скорость точки при равна…..

Возможные варианты ответа: 23, 19, 187, 17.

Правильный ответ: 17.

Уровень сложности заданий приблизительно одинаков.

Тестовые вопросы и задания всех тестов охватывают весь изучаемый материал, вопросы и варианты возможных ответов понятны по содержанию и подаются испытуемым в случайном порядке. Результаты тестовых проверок выдаются в процентах выполненных заданий сразу после истечения отведенного на тест времени или досрочного завершения студентом ответа на вопросы и задания. Приведем результаты самопроверки остаточных знаний по математике студентов 2 курса дневного отделения специальность `Менеджмент организации”. Результаты представим в виде гистограмм: по оси абсцисс - процент верно выполненных заданий, по оси ординат - процент студентов верно выполнивших задания.

Независимый Центр тестирования качества обучения, г. Москва.

Рис. 1. Результаты тестового опроса по математике студентов 2 курса дневного отделения специальность `Менеджмент организации” Независимым Центром тестирования качества обучения, г. Москва

Диапазон изменения от 20% до 97,5% выполненных заданий, среднее значение - 85% выполненных заданий.

Национальное аккредитационное Агентство в сфере образования, г. Йошкар-Ола.

Рис. 2. Результаты тестового опроса по математике студентов 2 курса дневного отделения специальность `Менеджмент организации” Национальным аккредитационным Агентством в сфере образования, г. Йошкар-Ола

Диапазон изменения от 40% до 100% выполненных заданий, среднее значение - 84% выполненных заданий. Несмотря на разные диапазоны, средние значения практически совпадают. Для сравнения приведем результаты письменного опроса этих же студентов. Студенты должны были решить задания аналогичные тем, из которых состояли тесты.

Письменный опрос по тестовым вопросам и заданиям

Рис. 3. Результаты тестового опроса преподавателем по математике студентов 2 курса дневного отделения специальность

`Менеджмент организации”

Диапазон изменения от 5% до 100%выполненных заданий, среднее значение - 64% выполненных заданий. При данном виде проверки остаточных знаний решение всех заданий проверял преподаватель, поэтому полностью исключалось угадывание правильного ответа. При верном ответе, но неверном решении задания ответ не засчитывался. Этим объясняется очень большой диапазон и значительно меньший средний процент выполненных заданий. Несколько иные результаты были получены при тестировании студентов технических специальностей.

Приведем результаты самопроверки остаточных знаний по математике студентов 2 курса дневного отделения специальность `Автомобили и автомобильное хозяйство”. Независимый Центр тестирования качества обучения, г. Москва

Рис. 4. Результаты самопроверки остаточных знаний по математике студентов 2 курса дневного отделения специальность `Автомобили и автомобильное хозяйство” Независимым Центром тестирования качества обучения, г. Москва

Диапазон изменения от 21,7% до 86,7% выполненных заданий, среднее значение - 47,7% выполненных заданий.

Национальное аккредитационное Агентство в сфере образования, г. Йошкар-Ола

Рис. 5. Результаты самопроверки остаточных знаний по математике студентов 2 курса дневного отделения специальность `Автомобили и автомобильное хозяйство” Национальным аккредитационным Агентством в сфере образования, г. Йошкар-Ола

Диапазон изменения от 36,4% до 97,7% выполненных заданий, среднее значение - 73% выполненных заданий. На наш взгляд, на различие в диапазонах изменения и среднем проценте выполненных заданий существенно влияет среднее время, выделенное на решение одного задания.

Посмотрим, как влияет на качество ответов отношение времени тестирования к числу заданий теста (среднее время, выделенное для решения одного задания) по различным специальностям.

Как видно из таблицы для экономических специальностей и диапазон изменения выполненных заданий и средние проценты почти не зависят от времени выделенного на одно задание, а для технических специальностей видна сильная зависимость. Очевидно, что чем больше время, тем ближе верхняя граница диапазона изменения к 100%, а средние проценты возрастают на 25% - 34%. Это можно объяснить еще и тем, что студенты технических специальностей имели более низкий уровень базовых (школьных) знаний по математике, чем студенты экономических специальностей. Это видно из следующих гистограмм, в которых: по оси абсцисс - баллы, полученные абитуриентами на Едином государственном экзамене, по оси ординат - процент абитуриентов, получивших эти баллы.

Результаты Единого государственного экзамена по математике при поступлении в ЧИ (филиал) МГОУ в 2004г, специальность «Менеджмент организации».

Рис. 6. Результаты Единого государственного экзамена по математике при поступлении в ЧИ (филиал) МГОУ в 2004г, специальность «Менеджмент организации».

Диапазон изменения от 44 баллов до 89 баллов, среднее значение - 70 баллов.

Результаты Единого государственного экзамена по математике при поступлении в ЧИ (филиал) МГОУ в 2004г, специальность ``Автомобили и автомобильное хозяйство”.

Рис. 7. Результаты Единого государственного экзамена по математике при поступлении в ЧИ (филиал) МГОУ в 2004г, специальность ``Автомобили и автомобильное хозяйство”.

Диапазон изменения от 41 балла до 76 баллов, среднее значение - 54 балла.

Надо отметить, что тестированию предшествовала большая работа. Преподаватели провели цикл обзорных лекций по всему курсу математики для всех желающих. Работа компьютерных классов была организована таким образом, что каждый студент имел возможность ознакомиться с демонстрационными вариантами тестов, узнать уровень сложности вопросов и заданий и предварительно оценить уровень своих остаточных знаний по математике. Это не могло не сказаться на результатах итогового тестирования. Преподаватели кафедры высшей и прикладной математики ЧИ (филиал) МГОУ оценивают результаты тестирования как удовлетворительные.

На основе вышесказанного можно сделать вывод, что дистанционный тестовый контроль достаточно объективно оценивает средний уровень знаний студентов, однако необходимо учитывать специфику различных специальностей и первоначальный уровень обученности студентов. Для студентов технических специальностей большее значение имеет время, отводимое на решение одного задания, чем для студентов экономических специальностей. В целом, такую форму контроля можно считать перспективной и достаточно объективной.

Размещено на Allbest.ru