Интеграция информационных технологий обучения в учебно-воспитательный процесс

Например, обучаемым необходимо проанализировать результаты анкетного опроса. Для этой цели педагог может предложить электронные таблицы Microsoft Excel. Обучаемые самостоятельно или с помощью педагога выбирают алгоритмы для первичной обработки данных (проверка их корректности, полноты) и методы статистического анализа. В простейшем случае это может быть вычисление процентных соотношений, ранжирование и т.п. Затем происходит распределение функций: ввод данных, их первичная обработка, применение различных статистических методов, анализ результатов, полученных для каждого метода, выбор наиболее подходящей диаграммы или графика для их визуализации (т.е. наглядного представления), сопоставление результатов для получения выводов по проделанной работе, подготовка компьютерной презентации и текстового отчета по результатам работы. Подобные принципы организации работы обучаемых с применением ИТО можно реализовать практически для любой учебной дисциплины, естественно, подбирая для этого наиболее подходящие программные средства. В такой ситуации каждый обучаемый объективно становится членом единой команды. Особенно актуально - подкрепление потребности групповой принадлежности в условиях дистанционного обучения, когда обучаемые не имеют тех возможностей общения со сверстниками и преподавателями, которые дает образовательная среда учебного заведения. И в этом случае вышеизложенный подход реализуется в виртуальном классе, там, где обучаемые контактируют друг с другом и педагогом с помощью коммуникационных технологий.

Если педагог постоянно использует в образовательном процессе определенное программное обеспечение (электронный учебник, моделирующую программу и т.д.), то очень перспективным направлением работы, опирающимся на потребности групповой принадлежности, является создание в учебном заведении кружка или даже клуба, объединяющего всех пользователей данного программного продукта. Уже существуют клубы, объединяющие школьников, углубленно изучающих экономику с помощью программы экономического моделирования МЭКОМ (см. 1.2). Это разумная альтернатива для тех детей и подростков, которых привлекают и компьютеры, и общение со сверстниками, но удовлетворить и ту, и другую потребность они пока могут только в игровых компьютерных клубах. Педагогу для создания подобного клуба, конечно, придется приложить определенные усилия, которые вполне себя оправдают: у него появятся заинтересованные помощники, получившие возможности для дальнейшего развития в атмосфере сотрудничества.

Потребности самоуважения. Потребности самоуважения связаны с множеством мотивов: утверждение в глазах педагогов, родителей, соучеников; достижение компетентности, уверенности в своих знаниях; удовлетворение от познавательной деятельности, самого процесса и его результатов; стремление к самостоятельности и саморегуляции познавательного процесса и др.

Подкрепление потребностей самоуважения основывается на создании условий, в которых обучаемый будет чувствовать себя компетентным, уверенным в том, что он способен самостоятельно справиться с поставленными перед ним задачами. Кроме того, очень важным является также сознание того, что результаты деятельности и сама она (в нашем случае - познавательная) должным образом признается и оценивается соучениками и педагогами. В образовательном плане к числу ключевых компетенций, имеющих непосредственное отношение к использованию информационных и коммуникационных технологий, относят когнитивную, коммуникативную, социально-информационную компетенции*. Для выработки качеств, определяющих эти компетенции, может использоваться весь спектр программных средств ИТО (см. главу 1): коммуникационные технологии - для овладения технологиями общения, в том числе и через Internet; обучающие и контролирующие системы, моделирующие программы и микромиры - для самостоятельной познавательной деятельности; мультимедиа и гипермедиа системы, Internet - для работы с многоплановыми (и по содержанию, и по представлению) источниками информации.

Обучаемый, вышедший на данный уровень иерархии по своим внутренним потребностям, даже несмотря на кажущуюся независимость, нуждается в поддержке и одобрении педагога. Самому способному и успешному обучаемому нужна если и не похвала, то признание его достижений. То же справедливо и при использовании ИТО. Обучающие программы обязательно должны строиться таким образом, чтобы при адекватных усилиях ученика создавалась ситуация успеха. С этой целью программа должна настраиваться (автоматически или по выбору) на его возможности, исходя из уровня стартовых знаний и психологических особенностей («зона ближайшего развития» знаний, быстроты реакции, гибкости мышления и т.д.). В этом случае перед обучаемым будут ставиться достижимые цели, и тогда они охотно используют программные средства, позволяющие им последовательно продвигаться к более сложным заданиям, при условии, что на каждом этапе они получают в качестве стимула к дальнейшей работе подтверждение достигнутому успеху.

Еще одна причина, по которой может быть затруднена самостоятельная работа обучаемых с дополнительными информационными ресурсами, - это несоответствие терминологии, стиля изложения, структуры электронных материалов аналогичным характеристикам традиционной документации. Легче всего избежать этого, если электронное «сопровождение» разрабатывается под существующий учебник или параллельно с подготовкой тех или иных учебных пособий, методических рекомендаций, сборников задач и т.п. Речь идет, конечно, не о повторении обычной учебно-методической документации, а о представлении информации интересным и новым способом: в форме компьютерных демонстраций, путем использования обучающих и моделирующих программ. В сети Internet в настоящее время функционируют различные образовательные сайты, предоставляющие доступ к таким электронным ресурсам, полезным и для учащихся, и для учителей: сайты Федерации Интернет-образования*, Открытого колледжа** и др.

Для учащихся старших классов ведущие позиции занимают мотивы, связанные с представлениями об их будущей профессиональной деятельности. Поскольку требование информационной компетентности не вызывает у обучаемых возражений и сомнений, педагогу остается только подобрать задания, наиболее интересные и содержательные с точки зрения их профессиональных интересов. Например, можно заинтересовать в использовании электронного учебника по курсу истории учащихся физико-математического класса или юных программистов, предложив им по-своему систематизировать материалы по определенной теме в виде базы данных или Web-сайта с оригинальной системой навигации. И, наоборот, для многих гуманитариев изучение математики становится более доступным, если педагог использует богатые демонстрационным материалом электронные учебники и системы символьной математики.

Достижение информационной компетентности предполагает, что ресурсы ИТО становятся для обучаемых естественной и неотъемлемой частью использующихся ими учебных материалов. Педагог может помочь им в этом, применяя разные подходы. Мы уже говорили о том, что желательно объединять электронные материалы с традиционными, например, через ссылки в лекциях, программе курса и другой учебной документации. Во многих учебных заведениях, поддерживающих работу образовательных Web-серверов, уже вошло в практику представление и динамичное обновление подобных ресурсов. Это могут быть демонстрационные материалы, моделирующие программы, подборки научных статей, аннотированные ссылки на ресурсы Internet и т.д. Подбор интересных и актуальных материалов позволит обучаемым увидеть преимущества использования дополнительных материалов, а также привлечь их к работе по формированию своих электронных ресурсов (рефератов, баз данных, аннотированных каталогов и пр.). Понимая, как трудно и даже нереально оградить обучаемых от обращения к Web-сайтам, предлагающим готовые сочинения, рефераты, курсовые работы и т.п., продуктивнее создавать в учебных заведениях свои банки из лучших образцов подобных работ, снабженных комментариями педагогов. Подобное общественное признание результатов познавательной деятельности служит прекрасным подкреплением потребности в самоуважении.

Еще один дополнительный стимул для обучаемых - это осознание ими того факта, что цель применения ИТО состоит не в стремлении формализовать учебно-воспитательный процесс, переложив его впоследствии на плечи компьютеров, а в желании преподавателей повысить качество обучения. Использование ИТО в учебно-воспитательном процессе освобождает время педагога и раскрывает дополнительные возможности для тесного взаимодействия с обучаемым, который сможет получить активную поддержку и помощь преподавателя при работе с особо сложным материалом в личном общении. С другой стороны, качественный электронный учебник позволяет обучаемому самостоятельно работать над сложной темой именно столько времени, сколько требуется ему лично. И то и другое, по сути, характеризует многовариантность возможных педагогических решений в каждом отдельном случае. Рефлексию обучаемых и дополнительную мотивацию можно обеспечить, обсуждая с ними вопросы применения ИТО, возможно, и в виртуальной форме.

Активная роль обучаемых как субъектов образовательного процесса предполагает, что в условиях педагогического учебного заведения (института, университета, колледжа) педагог не уклоняется от обсуждения путей улучшения преподавания в совместных дискуссиях со студентами - своими будущими коллегами. Предметом такого обсуждения может быть как изучение конкретной дисциплины, так и будущая профессиональная педагогическая деятельность (например, как надо видоизменить тестирующую программу, чтобы ее можно было использовать для учащихся определенной возрастной группы). Последний момент особенно важен с учетом того, что в настоящее время просматривается тенденция переноса и адаптации ИТО из вузов в школы (АОС, системы тестирования, моделирующие программы и др.). Подготовка индивидуальных и коллективных отзывов об используемых ИТО особенно актуальна для студентов педагогических вузов: при таком анализе от них требуется не просто использовать ту или иную технологию «для себя» - будущему педагогу, намеревающемуся совершенствовать свою профессиональную компетентность, очень важно продумать и то, как она может быть применена «для других».

Потребности самоактуализации. Самоактуализацию нельзя рассматривать как некоторое конечное состояние, правильнее считать ее процессом актуализации возможностей человека. Для познавательной деятельности - это процесс развития интеллектуальных способностей, самостоятельности, инициативности. Ведущим мотивом здесь можно назвать стремление наиболее полно раскрыть свой потенциал. В познавательной деятельности это проявляется стремлением не к высоким оценкам, а к знаниям, постоянному их пополнению, развитию природных способностей. Работать с обучаемыми, достигшими в своем развитии потребности самоактуализации, педагогу и очень сложно, и необычайно интересно. Хорошо, если сфера устремлений такой личности хоть как-то сопрягается с изучаемой дисциплиной. Тогда обучаемый сам будет стараться привлечь все доступные информационные ресурсы, в том числе и электронные. И педагогу остается только направлять своего целеустремленного ученика, а иногда и удерживать, лишь изумляясь его возможностям (кстати, с такой ситуацией постоянно сталкиваются преподаватели информационных технологий). Но вот другая ситуация - самоактуализирующийся ученик увлечен совсем иным, ему неинтересна изучаемая дисциплина. И здесь педагогу нужно постараться найти какие-то точки соприкосновения. Это как раз тот случай, когда использование разнообразных информационных технологий (работа с обучающими и тренировочными программами, проверка своих возможностей в системе тестирования, поиск информации в Internet) позволяет заинтересовать обучаемого в ознакомлении с самой учебной дисциплиной. Таким обучаемым было бы неправильно навязывать какие-то определенные программные средства. Можно лишь рекомендовать, доказательно обосновывая возможности в реализации тех целей, которые ставит перед собой обучаемый.

Для подкрепления потребностей самоактуализации необходима особая образовательная среда, в которой непременно должна присутствовать возможность свободного выбора - от источников информации до форм получения образования (очной, дистанционной, комбинированной). В такой среде должна создаваться атмосфера творческого поиска, необходимого для реализации познавательного потенциала личности. И все это как раз характеристики информационной образовательной среды современного учебного заведения, основанной на широком использовании информационных и коммуникационных технологий. Создание такой среды и последующее формирование единого образовательного пространства является одной из актуальнейших задач, стоящих перед системой образования.

Подкреплением мотивации самоактуализации обучаемых станет предоставление им определенной самостоятельности в проектировании индивидуальной образовательной траектории. И здесь именно ИТО позволяют выбрать темп изучения учебных материалов сообразно индивидуальным возможностям, варьировать последовательность изучения отдельных тем - в границах, определяемых общей логикой дисциплины. Например, вышеупомянутые комплексы VLE, Net-школа позволяют педагогу (в том числе и совместно с обучаемыми) сформировать для самостоятельной работы виртуальные группы, состоящие из произвольного числа людей, и спроектировать для каждой отдельной группы свой сценарий самостоятельной работы. В таком сценарии можно избирательно предложить не только учебный материал или тесты, но и сами формы деятельности: работа с теоретическим материалом или моделирующей программой, решение задач или участие в дискуссии, проводимой в режиме электронной конференции.

Однако такие возможности открывает только наличие целостного электронного учебного курса, материалы которого полностью доступны обучаемым, в том числе для копирования и переноса, при необходимости, на другой компьютер. Уходит в прошлое практика выставления учебных ресурсов для работы только в локальной сети данного учебного заведения. Обучаемый должен иметь возможность записать нужные материалы на дискету или компакт-диск, распечатать на бумаге, чтобы работать с ними в наиболее удобной для него обстановке наиболее приемлемым способом. Для образовательных Web-страниц такой проблемы не существует, поскольку указанные операции можно выполнить с помощью соответствующих команд той программы, с помощью которой просматривается страница (например, Microsoft Internet Explorer). У электронных учебников разработчики решают эту проблему, добавляя соответствующие функции (копирования, печати).

Для многих обучаемых, несмотря на высокий уровень развития потребностей самоактуализации, остается значимой возможность проявить себя в условиях своего рода соревнования, когда основную роль играет не столько получение высокой оценки, сколько потребность ярко показать себя хотя бы в узкой области, продемонстрировав свою особую подготовку. Помимо специальных конкурсов, олимпиад, в которых объективно может принять участие лишь незначительная часть обучаемых, можно внести в учебно-воспитательный процесс ряд соревновательных элементов, реализация которых будет опираться на возможности современных ИТО. Это выполнение коллективных проектов, распределение ролей в которых основано на предпочтениях обучаемых (например, поиск информации, подготовка текста, выполнение расчетов, компьютерный дизайн и т.п.), проведение конкурсов на лучшее исполнение вышеупомянутых отдельных ролей. Можно предусмотреть различные формы поощрения, по возможности, наиболее предпочтительные для победителей: публикация лучших работ в Internet, свободный график учебы, освобождение от зачета или экзамена, рекомендация на работу и т.д.

информационный учебный воспитательный оценивание

3. Особенности оценивания качества обучения

Рост числа студентов, охваченных новыми формами высшего и среднего профессионального образования, внедрение системы тестирования в общеобразовательных учебных заведениях, наконец, широкое распространение многочисленных сертификационных циклов в системе профессиональной подготовки - это те основные факторы, которые способствовали росту интереса к возможностям информационных технологий по оцениванию качества обучения.

Но в качестве неотъемлемого требования, предъявляемого к любой процедуре оценивания, необходима гарантия того, что использующиеся методы оценки адекватно отражают уровень достижения целей изучения учебного курса, приобретения соответствующих знаний, умений и навыков, развития личностных качеств обучаемых.

Особенности качественных и количественных подходов к оцениванию, методика измерения его результатов, наконец, использование различных технических средств довольно долго находятся в центре внимания отечественной педагогической науки*. В исследованиях** и нормативных документах*** последних лет представлены четкие требования к используемым заданиям, критериям оценивания, разработаны методики контроля качества обучения и соответствующие технологические процедуры.

Терминология. Предварительно необходимо разъяснить суть тех терминов, которые используются в описании процедур оценивания качества обучения и развития.

Оценивание, по сути дела, сводится к изучению какого-либо образца поведения человека, полученного в некоторый фиксированный момент времени. Основной вопрос: насколько представительным является данный образец поведения оцениваемого человека, поскольку именно на его основе делаются выводы о его статусе - достижениях, потенциале и способностях, интеллекте и мотивации.

Для проведения оценивания в первую очередь необходимо понимать, с какой целью выполняется оценивание и кто оценивается. Это очень важно, поскольку на одном и том же материале в ходе тестирования можно оценивать обученность или обучаемость, реакцию учащихся, поведение в сложной обстановке, эффективность использующихся методических приемов, наконец, значимость самого теста.

В частном случае, для процесса обучения, оценивание ставит своей целью получение оценки, содержащей как качественные, так и количественные показатели работы обучаемого.

Критериально-ориентированное оценивание* опирается на явно сформулированные цели и задачи изучения учебного курса и позволяет определить, в какой степени испытуемые овладели идентифицированными компонентами. В этом типе оценивания критерии усвоения задаются заранее.

Нормативно-ориентированное оценивание используется в тех случаях, когда необходимо ранжировать достижения в выбранной группе обучаемых, определяя количество достигнувших определенного балла в течение некоторого времени. Соответствующие тесты широко применяются не только для оценивания хода и результатов обучения, но и для оценки интеллектуальных способностей. Естественно, что соответствующие показатели для ранжирования могут устанавливаться, исходя из конкретного контекста процедуры оценивания: одно и то же значение показателя интеллектуального развития может характеризовать высокий результат для одной группы и средний или даже низкий - для другой.

Для оценивания результатов учебно-познавательной деятельности используются различные функциональные подходы, которым можно придать следующий смысл: диагностический - для идентификации сильньдх и слабых сторон; обобщающий - для получения итоговой оценки в конце работы с единицей изучения. Однако на практике в процедуре оценивания первый подход зачастую выступает в качестве подчиненного. Например, результаты, полученные в ходе диагностического оценивания (контрольная работа) могут учитываться в обобщающем и т.д. Современные представления о сущности диагностики обучения связывают с ней не только проверку знаний, умений и навыков обучаемых, но и возможность рассмотрения полученных результатов в связи со способами их достижения. Анализ данных диагностирования позволяет выявлять тенденции, прогнозировать дальнейший ход учебно-воспитательного процесса и, в конце концов, эффективно управлять им*.

В контексте применения в процедурах оценивания ИТО основной акцент делается на педагогическое тестирование - совокупность методических и организационных мероприятий, обеспечивающих разработку педагогических тестов, подготовку и проведение стандартизованной процедуры измерения уровня подготовленности испытуемых, а также обработку и анализ результатов*.

Разработка педагогических тестов ведется с должным методическим обоснованием их применения и обработки результатов тестирования, с учетом основных психолого-педагогических принципов обучения. Задания в тестах должны быть подобраны таким образом, чтобы можно было проверить основные уровни усвоения обучаемыми знаний. Напомним, что к их числу относят: 1) знание основных понятий и определений изучаемой темы; 2) понимание и умение применять полученные знания при решении типовых задач; 3) умение анализировать различные ситуации, находить решения нестандартных задач; 4) умение обобщать изученный материал, устанавливать связи с ранее изученными темами.

Этим уровням соответствуют определенные разновидности тестовых заданий. Тесты с заданиями закрытого типа, содержание которых сопровождается несколькими занумерованными вариантами ответа, а испытуемому предлагается выбрать номер (номера) правильного ответа, могут использоваться для проверки разных уровней усвоения: выбор одного правильного ответа из нескольких предложенных соответствует уровням 1 и 2; выбор нескольких правильных ответов из предложенного списка - уровням 2 и 3. Задания открытого типа, в которых испытуемому предлагается самостоятельно указать правильный ответ без указания возможных вариантов ответа, пригодны для проверки всех уровней усвоения знаний.

Если учащимся младших классов, изучающим правописание гласных после шипящих, предлагается вписать пропущенную букву, то речь идет о 1-м уровне. Но в тесте может быть представлена нестандартная задача, вопрос или задание (без указания возможных вариантов ответа), позволяющие оценить усвоение изученного материала на 3-м и 4-м уровнях. В естественнонаучных областях это может быть и расчетная, и качественная задача, ответ которой должен быть однозначным. Вот пример очень просто формулируемой задачи из области занимательной астрономии*. На полюсе солнце полгода находится над горизонтом, полгода же - под горизонтом. А луна? Ответ очень прост: полмесяца. Но для того чтобы его получить, нужно очень хорошо представлять себе положение плоскости эклиптики, орбиты и взаимное расположение небесных тел в динамике. Более сложно подготавливать тестовые задания 3-, 4-го уровней для гуманитарных дисциплин. Но и это вполне возможно. Вспомним каверзные вопросы из телевизионной передачи «Умники и умницы» на сопоставление различных исторических фактов, также предполагающие вполне конкретные ответы.

Предпосылки использования ИТО в процедурах оценивания. Можно и нужно ли привлекать средства информационных технологий в практику проведения процедур оценивания? Да, и вот лишь некоторые причины этого.

Информационные технологии могут использоваться в процедурах оценивания на различных уровнях - от средства управления информацией об оценках, полученных традиционными способами, до полностью автоматизированных систем контроля качества знаний, включающих в себя диагностический, обобщающий и коррекционный модули. В первом случае можно обеспечить представление имеющейся информации в соответствии с потребностями самых различных лиц - педагогов, обучаемых, администрации учебного заведения и пр. При этом с помощью современных программных средств (электронные таблицы, системы управления базами данных, пакеты статистической обработки) можно улучшить не только внешние характеристики, но, что более важно, содержательную часть имеющихся данных. Если для самих обучаемых важно узнать набранные баллы или полученные отметки, то для администрации учебного заведения наиболее подходящей формой представления, возможно, будут диаграммы и графики с иллюстрацией тенденций изучения определенной дисциплины, сравнением результатов, полученных в разных учебных группах, и т.д. Компьютеризация тестирования по сравнению с использованием бумажных технологий открывает ряд интересных возможностей. Создание и развитие базы данных с вопросами позволяет постоянно совершенствовать контроль знаний (но здесь имеются свои проблемы, связанные с идентификацией сложности вопросов и валидности, т.е. значимости получаемых тестов*). Мы уже отмечали возможности современных тестирующих систем по созданию и ведению базы данных с результатами прохождения тестов. Такой электронный «классный журнал» благодаря возможностям обобщения и анализа информации помогает преподавателю осуществлять оперативное управление учебным процессом.

Применение ИТО позволяет педагогу привлечь новые и улучшить традиционные методы оценивания, гарантирует качественное выполнение процедуры оценивания. (Педагоги явно ощущают недостатки традиционной системы контроля, которые вполне очевидны и являются во многом продолжением ее достоинств.)

Устный опрос достаточно универсален и его реализация, на первый взгляд, не представляет никаких проблем. Однако он может быть только выборочным и не давать педагогу возможности проверить знания всех обучаемых, а в случае слабых ответов иногда превращается в своеобразное выяснение отношений. Тестовый контроль в такой ситуации имеет явные преимущества, позволяя без особых затрат времени опросить всех обучаемых по всем темам изучаемой дисциплины и способствуя повышению рентабельности образования за счет экономии времени преподавателей. Такая форма контроля как экзамен в силу субъективности педагогов часто не позволяет обоснованно оценить уровень знаний обучаемых, а тестовый контроль достаточно универсален и может использоваться как в средней школе, так и в высшей. Преимущество тестового контроля состоит в том, что он является научно обоснованным методом эмпирического исследования и позволяет преодолеть субъективные оценки знаний обучаемых.

Нельзя отрицать тот факт, что в точных науках, где и учебный материал, и требования к качеству обучения структурируются и формализуются естественным образом, составлять тестовые задания легче. Но преподавание всех учебных дисциплин основано на требованиях к базовым знаниям. Например, для такой учебной дисциплины, как история, важно «знание событий, дат, имен, определений основных понятий и многого другого. Проверка базовых знаний средствами тестового контроля позволяет преподавателю в оставшееся время уделить больше внимания общению с обучаемыми на уровне концепций и выводов, проверить традиционными формами не столько знание, сколько понимание проблематики той или иной учебной дисциплины. Следует подчеркнуть, что именно проверка базовых знаний является наиболее доступной сферой для применения тестового контроля»*.

Современные системы тестирования отличает определенная гибкость, когда обучаемым можно выбрать индивидуальный график прохождения контрольных точек, а при тестировании - конкретный режим: попытаться ответить на большее число вопросов за большее время или, наоборот, ограничить количество вопросов, но получить меньшее время; выбрать меньшее число трудных вопросов или большее число простых и т. п. Системы тестирования часто предлагают испытуемым работу в режиме самоконтроля с заданиями, аналогичными тем, что будут предложены им впоследствии в качестве контрольных*. В этой связи выделяют репетиционные тесты, позволяющие проверить степень готовности испытуемого к педагогическому тестированию, знакомящие с порядком работы, объемом и сложностью заданий, иногда даже предлагающие справочные материалы, подсказки и т. п. Проведение таких тестов одинаково важно и для педагогов, и для обучаемых, поскольку по их результатам можно судить о качестве полученных знаний и самих тестовых заданий.

Опытные преподаватели знают, как разнообразит учебный процесс и повышает познавательную мотивацию обучаемых использование каких-то новых элементов в преподавании. Автоматизированные тесты привлекают своей необычностью по сравнению с традиционными формами контроля, возможностью проведения быстрого и объективного оценивания качества знаний. Педагогические тесты при регулярном использовании побуждают к систематическим занятиям по предмету, что способствует формированию дополнительной мотивации к обучению. Оперативность обработки тестов обеспечивает эффективную обратную связь, а в условиях, когда обучаемые могут проходить испытания так часто, как им это потребуется, педагог может добиться гарантированного усвоения базовых знаний, умений и навыков.

Для решения вопросов о конструкции контролирующей системы, стратегии оценивания, использующихся для этого методов необходим анализ того, какой тип обучения будет реализовываться в каждом конкретном случае, поскольку, например, для воспроизводящего типа обучения сами принципы контроля должны в корне отличаться от тех, что могут быть использованы для поискового типа. Далее, существуют проблемы, связанные с чисто измерительными аспектами в процедуре оценивания. Это и выбор валидных материалов для тестирования, и определение подходящих единиц измерения, а также обеспечение того, чтобы процедура оценивания измеряла именно то, что должно быть измерено, надежность оценок и адекватность использующихся для их обработки статистических методов и т.д.*

Автоматизированное тестирование.

Предметные тесты. Говоря об эффективности информационных технологий для организации процедуры оценивания на основе педагогических тестов по определенным предметам, или предметных тестов, ведут речь об использовании вопросов с набором вариантов возможного единственного ответа - тесты типа MCQ (англ. Milti Choice Question, т.е. вопрос с множественным выбором). Но может потребоваться применение и других вариантов опроса, например, необходимость допускать многократные ответы, ввод текста, чисел в фиксированном или в свободном формате, когда сравнение введенного ответа с эталоном ведется по так называемым ключевым словам.

Автоматизированные тесты типа MCQ представляют достаточно эффективный метод массовой проверки уровня фактических знаний за относительно короткое время. Однако педагоги должны понимать ограниченность возможностей подобного тестирования. Это касается, в первую очередь, использования тестов MCQ для оценки знаний, умений и навыков, связанных с продуктивной деятельностью обучаемого, поскольку подобное тестирование способно выполнить оценку лишь на уровне узнавания или воспроизведения изученных ранее объектов. Но это не отрицает возможности тестов для объективной проверки качества обучения в ходе диагностического и обобщающего тестирования, разумеется, при условии использования большого количества продуманных вопросов с таким количеством вариантов, которое бы поставило в затруднительное положение тех обучаемых, которые рассчитывали угадать ответ.

Современные контролирующие программы обычно не знают ограничений, связанных с необходимостью использования формул (математика, химия и др.): в этих случаях используются или специальные символы, или в текст вопроса включаются графические объекты.

Структурирование вопросов и адаптивные тесты. Автоматизированное тестирование может основываться на различных алгоритмах предъявления вопросов испытуемому, в том числе и на изменяющих ход опроса в зависимости от успешности ответов*. Современные контролирующие системы способны адаптироваться и к неверным ответам, предъявляя в этом случае так называемые наводящие вопросы или даже вопросы, содержащие подсказку. Такие функции превращают подобную систему уже в обучающую. Естественно, что алгоритм экзамена или обучения должен быть запрограммирован заранее, так, чтобы с помощью одной и той же программы на одной и той же базе данных с вопросами можно было реализовать и контроль, и обучение. Для наполнения таких систем от преподавателя требуется большая работа по структурированию вопросов: сложный вопрос в случае неверного ответа должен предъявляться в несколько приемов, с тем чтобы даже более длинным путем, но подвести обучаемого к правильному ответу.

Традиционно экзамен или зачет, проводящийся с помощью системы автоматизированного тестирования, состоит в том, что экзаменуемому задается определенное количество вопросов независимо от того, насколько хорошо или плохо он на них отвечает. Количество набранных баллов при использовании теста такого рода зависит от количества правильных ответов. При этом делается естественное предположение - чем выше качество знаний, тем на большее количество вопросов экзаменуемый отвечает правильно. Такая форма тестирования распространена и используется весьма успешно, однако в применении к конкретному испытуемому количество заданных вопросов может оказаться больше или меньше, чем необходимо для получения адекватной оценки качества его знаний. На практике сложно подготовить тест с вопросами одинаковой степени сложности: в тесте фиксированной длины могут быть вопросы, которые для определенного человека окажутся слишком легкими, и вопросы слишком трудные для него. И в этом случае верные ответы на легкие вопросы и неправильные ответы на трудные вопросы не придадут такому тесту должной степени валидности.

Гораздо лучше, если бы нелинейная тестирующая система могла определять тот уровень сложности вопросов, на котором у экзаменуемого начинают возникать проблемы. Этот уровень мог бы как определить оценку (для экзаменатора), так и выявить сложные места (для экзаменуемого). Целесообразность подобного контроля, адаптирующегося к возможностям обучаемого, следует также из необходимости оптимизировать традиционное тестирование. Для каждого педагога очевиден тот факт, что для обучаемых с хорошей подготовкой легкие задания просто неинтересны, и, наоборот, трудные задания снижают мотивацию к обучению у имеющих относительно слабую подготовку.

Новым шагом в этом направлении стал САТ* (англ, computer adaptive test - компьютерный адаптивный тест). Это тест, в который заложена приспособляемость к возможностям экзаменуемого. Принцип тестирования с использованием САТ состоит в следующем: при выполнении одного и того же адаптивного теста экзаменуемые с высоким и низким уровнями подготовки получат совершенно разные наборы вопросов: первому будут предложены сложные вопросы, а второму - легкие. Если в итоге доли правильных ответов у обоих даже совпадут, то первый наберет большее количество баллов, так как он отвечал на более сложные вопросы.

Фирма Microsoft, разрабатывающая и широко использующая такую форму тестов*, предлагает для иллюстрации их особенностей сопоставление с соревнованиями по прыжкам в высоту. Прыгун, независимо от его способностей, быстро достигает такого уровня планки, на котором он имеет примерно равные шансы как взять высоту, так и сбить планку. «Баллом» для прыгуна является последняя взятая высота. Для получения высокого балла прыгун не должен брать каждую возможную более низкую высоту, также он не должен пытаться брать более высокий уровень планки.

Пример из области образования будет более наглядным. В ходе устного экзамена учитель обычно сначала задает вопрос средней сложности, и если ученик отвечает правильно, то ему предлагается более сложное задание. В случае же первого неправильного ответа в качестве следующего задается более легкий вопрос. Этот процесс продолжается, и в течение короткого периода времени у учителя постепенно складывается правильное представление о качестве знаний ученика. При этом ему не надо задавать каждому испытуемому слишком легких или слишком сложных вопросов, а достаточно отталкиваться от того уровня сложности вопросов, на которые ученик дал правильные ответы.

Точно так же должен быть организован нелинейный тест типа CAT, обеспечивающий проведение контроля качества обучения на уровне квалифицированного устного экзаменатора. В таком тесте первоначально задается вопрос средней сложности, и полученный ответ немедленно влияет на постепенно формируемую будущую общую оценку. Если ответ правильный, то предполагаемая оценка возможностей экзаменуемого повышается на определенную величину. Затем выбирается и задается более сложный вопрос. Если же ответ на него дан неправильно, то предполагаемая оценка возможностей экзаменуемого снижается, а в качестве следующего вопроса снова предлагается более легкий. По мере того как задаются все новые и новые вопросы, все более точной становится оценка уровня знаний экзаменуемого. Тест заканчивается когда точность оценки достигает статистически приемлемого уровня (или когда будет задано максимальное количество вопросов). Так как точно неизвестно, когда адаптивный тест закончится, то обычно он состоит из переменного количества вопросов, причем минимальное и максимальное значения для количества вопросов устанавливаются заранее.

При прохождении адаптивного теста возможно, что к моменту завершения испытания менее подготовленный человек может ответить на такое же количество вопросов, что и более подготовленный. Сравнение вопросов, на которые даны правильные ответы, покажет, что более подготовленный ответил правильно и на более сложные вопросы. Следовательно, он получит более высокие баллы. Количество набранных баллов не основано на количестве правильных ответов, а зависит от уровня сложности вопросов, на которые даны правильные ответы.

Главное преимущество адаптивного теста перед традиционным - его эффективность. Адаптивный тест может определить баллы экзаменуемого с помощью меньшего количества вопросов, иногда уменьшая длину теста на 60 %, это - главная причина, по которой следует отдавать предпочтение адаптивным тестам.

Критериально-ориентированные тесты. Для объективной оценки достигнутого качества обучения, в том числе и при работе с обучающими программами, особый интерес представляют критериально-ориентированные тесты. Проект отраслевого терминологического стандарта Центра тестирования* определяет критериально-ориентированный тест как частный случай теста, предназначенного для абсолютного, т.е. персонального, тестирования, позволяющий оценить, преодолел ли испытуемый определенный порог усвоения учебного материала. При этом результаты тестирования сравниваются с некоторым заранее заданным критерием уровня подготовленности. Таким образом, речь идет не столько о самих тестах, сколько об интерпретации тестовых результатов.

Педагог может получить ответ на вопрос о том, какие элементы содержания учебной дисциплины усвоены конкретным испытуемым, по сути дела, только в виде вероятностной оценки. При подготовке таких тестов на основе содержания учебной дисциплины строится генеральная совокупность, т. е. однородное множество заданий для измерения качества полученных знаний, умений, навыков. Затем испытуемому предлагается тест - некая выборка заданий из этой совокупности. Наконец, на основе ответов делается вероятностный вывод о знаниях учебной дисциплины данным испытуемым. Подобные тесты в оригинале носят название Domain-Referenced Tests, что дословно означает содержательно-ориентированные тесты. Понятно, что для надежности результатов требуется основательное определение содержания изучаемой дисциплины и большое число заданий. При этом необходимо, чтобы соблюдались*: а) полнота отображения материала образовательной программы при отборе содержания; б) правильность пропорций отдельных разделов и тем предмета (содержательных линий); в) полнота охвата требований государственных образовательных стандартов; г) соответствие содержания заданий знаниям, умениям и навыкам, запланированным для проверки в спецификации тестовых материалов; д) значимость содержания каждого задания для целей проверки.

Подобные тесты можно использовать при проведении экзаменов с точной дифференциацией результатов, поскольку они позволяют получить абсолютную оценку качества обучения. Задания для такого тестирования должны быть ориентированы на диагностику различных уровней усвоения учебного материала: от воспроизведения фактов, понятий, законов и их применения в типовых ситуациях до систематизации и обобщения знаний, позволяющих найти ответ на проблемные вопросы, решить нестандартную задачу и т.д. В таком тесте задания разного уровня имеют разный «вес» - и по тому, как оценивается их выполнение, и по их относительному числу в общей массе заданий. Подобная особенность характеризует, например, тесты, использующиеся в Централизованном тестировании и при проведении Единого государственного экзамена*.

В некоторых случаях испытуемым может быть предложена и относительно небольшая выборка однородных заданий. Такое тестирование можно использовать, например, для проверки овладения (на уровне узнавания и воспроизведения) сравнительно ограниченным набором знаний, умений и навыков, выступающих в качестве заданного стандарта или критерия усвоения учебной дисциплины при проведении зачетов. Здесь можно говорить не только об объективном измерении разноуровневой подготовки, а и о достижении тем или иным испытуемым минимально допустимого уровня. Такой подход удобен для педагогов и организаторов образования в тех случаях, когда необходимо проверить достижение большой группой обучаемых предельно допустимого уровня требований (например, при аттестации учебного заведения). В таких случаях и говорят о критериально-ориентированной интерпретации результатов тестирования, позволяющей сделать основной вывод: ч т о из заданного стандарта и на каком уровне реально усвоено.

Мы затронули только основные моменты, связанные с местом критериально-ориентированных тестов в организации контроля качества обучения. Более подробный ответ на эти и многие другие вопросы можно найти в монографии В.Ю. Переверзева*. В этой книге уделяется большое внимание организации не только контроля, но и качественного обучения в школе и вузе с помощью соответствующим образом подобранных тестовых заданий.

Дополнительные возможности ИТО в процессе оценивания качества обучения и развития. Перечислим еще ряд возможностей, открывающихся благодаря использованию ИТО. Помимо непосредственного тестирования имеются и другие направления в процессе оценивания уровня обучения и развития, где информационные технологии могут обеспечить качественно новые результаты.

Случайный выбор параметров вопроса. Автоматизация тестирования открывает, по существу, альтернативный метод создания вопросов (чаще - контрольных заданий) с помощью вариаций случайно подбираемых параметров вопроса. Такие вопросы имеют фиксированный формат, включающий одну или несколько переменных составляющих, которые могут изменяться при составлении вопроса или в ходе тестирования - случайным образом или по некоторой формуле. Например, для расчетных заданий могут задаваться случайным образом значения исходных данных, в тестовых заданиях на знание тех или иных определений словосочетания «необходимое условие» на «достаточное условие» и т. п. В таких тестах сами вопросы, по существу, носят формальный характер, однако для многих обучаемых подобные тесты оказываются очень полезными, особенно в тех случаях, когда необходимо отработать определенный автоматизм реакции на ту или иную ситуацию; тогда речь идет, скорее, о тренировочной, чем контролирующей системе.

Создание сетевой базы данных для хранения вопросов. Организация коллективного доступа к базе данных, хранящих тестовые задания и вопросы, очень актуальна при создании единой образовательной среды для учебных заведений любого уровня. С помощью современных коммуникационных технологий (электронная почта, электронные конференции, дискуссионные группы на образовательных Web- сайтах) ее пополнением и развитием могут заниматься все заинтересованные педагоги, что значительно улучшает качество тестирования.

Автоматизированные системы регистрации и анализа результатов оценивания обученности. Говоря о возможностях информационных технологий для оценивания качества обучения, довольно часто оставляют без внимания как раз ту сферу их применения, которая позволяет добиться быстрых и эффективных результатов. Речь идет о регистрации, хранении, анализе данных по контролю обученности, а также их использовании для оперативного и долгосрочного управления образовательным процессом. Для этой цели педагоги и администрация учебного заведения могут использовать электронные таблицы, системы управления базами данных, пакеты статистической обработки. Все эти программные средства позволяют вносить имеющиеся данные вручную - в том случае, когда нет возможности автоматически их сгенерировать в электронном виде (например, если соответствующий контроль проводится традиционно - письменная контрольная работа или сочинение, опрос на уроке и т.п.). Практически все современные программные средства, относящиеся к перечисленным категориям, воспринимают данные, подготовленные с помощью других программ (в нашем случае - тестирующих) и имеющие какой-либо из стандартных форматов (текстовый, табличный и т.п.), что потенциально расширяет их возможности. Подобная автоматизация позволяет сопоставлять и анализировать качество усвоения различных учебных дисциплин, выявлять и прослеживать те или иные тенденции, проявляющиеся при оценке обученности, что обеспечивает высокий уровень обратной связи и управляемости образовательным процессом.

Итоговые оценки и другая информация - что важнее. В ряде случаев, особенно для формирующего тестирования, только лишь информация о том, на какое количество вопросов был дан правильный ответ, явно недостаточна для управления образовательным процессом по данной учебной дисциплине конкретного обучаемого. И здесь на помощь преподавателю может придти динамическое отслеживание хода тестирования, когда в специальный файл или базу данных записываются все ответы обучаемого, которые впоследствии могут использоваться для более глубокого анализа и диагностики усвоения учебного материала. Кроме того, в подобных системах фиксируется полный протокол работы испытуемого: количество попыток, предпринятых для прохождения теста, время, затраченное на ответы на отдельные вопросы и тест в целом.

Протоколирование хода тестирования открывает возможность анализировать не только качество усвоения знаний, умений и навыков, но личностные особенности обучаемых, проявляющиеся в своеобразии прохождения тестирования. Например, протоколирование полных данных позволяет выделить среди «неудачников» тех, кто стремится к наилучшему результату, затрачивая много времени и делая неоднократные попытки. Противоположной можно считать категорию лиц, которые ограничиваются более низкими результатами, но тратят на тестирование значительно меньше времени, чем представители первой группы. Обсуждение с обучаемыми не только самих результатов прохождения теста, но и использованной стратегии поможет педагогу сориентировать их в нужном направлении: в случае недостаточно высоких результатов при первой попытке желательно направить силы обучаемого на устранение пробелов в подготовке, а затем пройти повторное тестирование.

Подобный анализ особенно уместен на этапе промежуточного, диагностического тестирования для улучшения обратной связи. И если на стадии итоговой проверки качества обучения вышеперечисленные параметры (количество попыток, время, затраченное на ответы) играют решающую роль, педагог сможет лучше подготовить обучаемых, уже зная слабые стороны каждого из них и руководствуясь целями проводимого тестирования.

Вопросы безопасности. При переходе к автоматизированному тестированию преподавателей волнуют вопросы безопасности, защиты тех материалов, на основе которых проводится тестирование, и данных, представляющих его результаты. При подготовке соответствующего программного обеспечения разработчики обычно предусматривают определенные средства защиты: доступ к базе данных с вопросами теста осуществляется по паролю, который обновляется по прошествии определенного промежутка времени. При наличии достаточного числа компьютеров эффективным оказывается проведение одномоментного тестирования для всех обучаемых или, в крайнем случае, с разбивкой потока на две группы, проходящих тестирование непосредственно друг за другом. Кроме того, при одновременном тестировании группы обучаемых можно использовать один и тот же набор вопросов, но предъявлять их в различном порядке. Еще лучше эта проблема может быть решена при наличии базы данных с вопросами, обеспечивающими проведение сопоставимых, но не идентичных испытаний.

Информационные технологии в качестве инструмента управления. Имеется множество примеров интегрированных обучающих систем, включающих полную структуру учебного курса: лекции, задания для практической работы, средства проверки качества усвоенных знаний, дополнительные ресурсы для самостоятельной и творческой работы в виде демонстрационных и моделирующих программ. Однако управление контролирующим модулем даже для таких систем может оказаться более эффективным на основе других, самостоятельных технологических средств. Например, в системе дистанционного обучения или при организации самостоятельной работы обучаемый может получить в свое распоряжение программу, но для более эффективной работы необходимо взаимодействие с педагогом-наставником, который очно или с помощью электронной почты может вовремя напомнить о необходимости подготовки к очередному тестированию, ответить на имеющиеся вопросы, оптимизируя тем самым ход образовательного процесса.

Компьютеры представляют собой идеальный инструмент для мониторинга частоты обращения к тем или иным электронным образовательным ресурсам (образовательный сервер, электронная библиотека, обучающие программы и т.п.) для улавливания тенденций в ходе образовательного процесса как на уровне отдельных обучаемых, так и групп, раннего обнаружения многих проблем, связанных с успеваемостью. Последовательное занесение на протяжении нескольких лет в электронный классный журнал результатов обучения по отдельным разделам изучаемой учебной дисциплины дает педагогу и администрации учебного заведения возможность провести анализ и сделать выводы о достоинствах и недостатках использующихся учебников и об адекватности методических приемов. Наличие такой информации особенно полезно для начинающих педагогов, способных ориентироваться на объективные данные о результатах работы своих более опытных коллег.

Психологическая диагностика обучаемых. Помимо оценивания обученное педагогу очень важно иметь ясное представление об индивидуальных особенностях обучаемых, о формировании и развитии их личностных качеств: общих и специальных способностей, обучаемости, интеллекта, креативности, памяти, быстроты реакции, коммуникабельности и т.д. Только такое комплексное исследование может обеспечить полное представление о ходе образовательного процесса и его результатах. Речь идет о психологической диагностике, которая также может быть проведена с помощью автоматизированного тестирования. Разумеется, речь не идет о том, чтобы учитель заменил собой психолога, но представлять себе возможности, достоинства и недостатки автоматизированной психодиагностики должен каждый педагог.