Метод комплексного оцінювання рівня сформованості іншомовної комунікативної компетентності фахівців

Размещено на http://www.allbest.ru/

Метод комплексного оцінювання рівня сформованості іншомовної комунікативної компетентності фахівців

Застело О.В.

старший викладач

В останні роки у сфері освіти постійно вдосконалюється система контролю та оцінювання навчальних досягнень, яка орієнтується на використання педагогічних тестів. Переважна більшість сучасних досліджень учених зорієнтована на побудову концепції навчання з урахуванням суттєвої ролі контролю навчальних досягнень, що дістало теоретичне розроблення у працях багатьох вітчизняних і зарубіжних дослідників, зокрема Л. Бахмана [12], Р. Лина [13], В.С. Аванесова [1], М.Б. Челишкової [11], О.П. Петращук [8] та інших. У розробку проблеми управління якістю підготовки фахівців в освітніх системах національного рівня зробили значний внесок В.П. Беспалько [4], Г.В. Гутник [6], Н.Ф. Єфремова [7], А.А. Аветисов [2], А.Г. Бермус [3], Н.А. Селезньова [9].

У зв'язку зі зростаючим використанням інформаційних технологій у вищих навчальних закладах виникає необхідність нових досліджень, спрямованих на вивчення методики використання цих технологій у підготовці слухачів. Тому все більше дослідників акцентують увагу на педагогічних проблемах упровадження комп'ютерних систем контролю навчальних досягнень. Наприклад, Г. Вайнер [14] виділяє чотири покоління комп'ютерних педагогічних вимірювань контролю навчальних досягнень: комп'ютерне тестування; комп'ютерне адаптивне тестування; безперервне вимірювання; інтелектуальне вимірювання знань. Найбільш поширені поки що два перші покоління. Питаннями оцінювання якості комп'ютерних педагогічних вимірювань займалися Д. Зисен, Л. Стейнберг та інші. Аналіз праць учених вказує на важливість розроблення проблеми підвищення ефективності процесу оцінювання навчальних досягнень і достовірності інтегральної оцінки під час комплексного тестування. Зокрема, якісний комплексний контроль рівня сформованості іншомовної комунікативної компетентності (ІКК) значною мірою зумовлює успішне здійснення іншомовної мовленнєвої діяльності тестованого.

Сучасний рівень розвитку педагогічної науки і технологій висувають перед системою вищої професійної освіти завдання переоцінки проблем контрольно-оцінювального процесу. Наявні підходи до оцінювання рівня сформованості ІКК фахівців часто мають багато недоліків, таких як:

підвищена складність;

вузьке застосування;

стихійність;

нераціональне використання методів і форм;

відсутність дидактичної цілеспрямованості;

недостатня впорядкованість проведення контролю.

Збільшення обсягу інформації, що надходить, та підвищення складності освітніх програм висувають на перший план аспекти оперативності їх вивчення та систематизації. Відомим фахівцем з теорії дослідження операцій Ю.Б. Гермейером [5] були розроблені різноманітні види інтегральних показників. Теорія згортання була розроблена А.І. Субетто [10]. Проте у сучасних системах контролю та оцінювання рівня сформованості ІКК фахівців цей напрям залишається недостатньо дослідженим.

Метою цієї статті є висвітлення певних методів виставлення інтегральних оцінок за результатами комплексного тестування для визначення рівня сформованості ІКК фахівців.

Науковий підхід до вдосконалення навчального процесу має на меті інформатизацію всіх його етапів для забезпечення більш ефективного засвоєння знань, умінь і навичок фахівцями задля вдалого виконання задач професійної діяльності. Без систематичного та достатнього за обсягом втілення принципу зворотного зв'язку не можна серйозно говорити про ефективне управління навчальним процесом.

Метод комплексного або інтегрального оцінювання об'єктів, що характеризуються якісно неоднорідними параметрами, широко використовується у багатьох галузях, наприклад, для визначення рівня сформованості ІКК фахівців. Проаналізуємо особливості цього методу, нехтування якими призводить до найбільш поширених помилок. Продемонструємо, що результати його застосування часто виявляються недостатньо точними.

Багато викладачів нерідко стикаються з необхідністю виставлення комплексної оцінки фахівцям за результатами тестування, що складається з різних окремих тестів. Для зменшення помилок при виставленні комплексної оцінки фахівцям нині широко застосовуються методи експертних оцінок. Порівнювати декілька результатів комплексного тестування фахівців, ґрунтуючись лише на якісних оцінках, часто буває складно. Тому для спрощення порівняння результатів комплексного тестування фахівців перевага віддається кількісним оцінкам.

При цьому кожній якісній оцінці надається певний бал. Після цього результати комплексного тестування фахівців можуть бути обчислені за чисельними оцінками за окремі тести.

Якщо результати комплексного тестування фахівців (РКТФ) походять із кількох окремих тестів, досить часто використовують комплексні (інтегральні) оцінки такого вигляду:

Як інтегральна оцінка приймається арифметична сума оцінок за окремі тести:

г₂= т +T, +...+т_п (і),

де T - інтегральна оцінка фахівця,

T - оцінка за i-й тест.

Однією з проблем інтегральних оцінок є необхідність враховувати неоднакову важливість окремих тестів. Як правило, цю проблему вирішують введенням коефіцієнтів вагомості тестів. Кожному тесту методом експертних оцінок надається вагомий коефіцієнт, який відображає його важливість у певній ситуації. Тоді формула (1) для розрахунку інтегральної оцінки набуває вигляду:

T^=k_l-T_l+k_i-T_i+... + k_n-T_n (2),

де k - вагомий коефіцієнт (важливість) i-го тесту.

У деяких випадках застосовується перемноження оцінок за окремі тести:

T_t= t xT₂ x...xT_n (3),

Очевидно, що при порівнянні декількох результатів комплексного тестування фахівців із розрахунком інтегральних оцінок за формулою (3) коефіцієнти важливості можна не вводити, що, на перший погляд, вказує на перевагу цього методу обчислення.

Можемо бачити з результатів, наведених у табл. 1, що при застосуванні формули (2) у першого та другого фахівців результати тестування (РКТФ1 і РКТФ2) мають однакові ранги (20 = 20). А при застосуванні формул (3) і (4) ранг у РКТФ1, відповідно, менше (75 < 200) і більше (11,49 > 10,1), ніж у РКТФ2.

Окрім арифметичної суми або перемноження оцінок за окремі тести для визначення результатів комплексного тестування фахівців, можливе застосування інших способів обчислення інтегральних оцінок, наприклад, підсумовування квадратів оцінок за окремі тести:

т_,=уі Ш?+(ед² +...(«, )² (4),

Варто зазначити, що при порівнянні кількох результатів комплексного тестування фахівців, інтегральні оцінки яких обчислюються у різний спосіб, тип обраної згортки може призводити до різних результатів.

Наприклад, припустимо, що при порівнянні РКТФ1 та РКТФ2 двох фахівців оцінки за окремі тести варіюють від 1 до 5, а оцінки коефіцієнтів важливості варіюють від 1 до 3. Бали, підібрані таким чином, що інтегральні оцінки, які обчислені за формулою (2), співпадають. Результати обчислення інтегральних оцінок подано у табл. 1.

Таблиця 1. Порівняння інтегральних оцінок

У зв'язку з цим виникає питання, який тип згортки є доцільним. Це питання залишиться відкритим, допоки вибір формули для обчислення інтегральної оцінки не матиме суворого теоретичного обґрунтування.

У кваліметрії освіти теорія оцінок, як правило, обмежується різного типу сепарабельними, навіть більше - адитивними згортками. Різноманітні типи комплексних балових оцінок, рейтингові системи оцінок та інші обмежуються першим типом згортання.

На жаль, донині на практиці навчання у вищих навчальних закладах цей принцип реалізується дуже мало та у досить недосконалій формі. Кожен із застосовуваних методів та форм перевірки рівня знань фахівців має власні переваги та недоліки, певні обмеження.

Дані, отримані під час контролю та обчислення результатів навчання, можуть сприяти зміненню методики викладу матеріалу. Саме тому вирішення питань інформатизації відповідного спрямування є важливим завданням з педагогічної точки зору. Для контролю за перебігом навчального процесу необхідно впроваджувати сучасні системи оброблення результатів тестування.

Одним із сучасних підходів до проведення комплексного тестування фахівців є метод комплексного застосування різних типів згорток результатів тестування. Блок-схему цього методу наведено на рис. 1.

Рис. 1. Блок-схема методу комплексного застосування різних згорток для обчислення результатів тестування

Метод забезпечує ітераційну процедуру обчислення інтегральної оцінки за результатами застосування 9 різних типів згорток, що наведено у табл. 2.

Таблиця 2. Типи згорток для обчислення результатів тестування

Таким чином, запропоновано методичний підхід до оцінювання рівня сформованості ІКК фахівців за результатами комплексного тестування (більше ніж одного тесту), який на відміну від відомих є інваріантним (не залежіть від типу згортки результатів декількох тестувань). Це дозволяє відмовитися від суб'єктивного вибору інтегральної агрегаційної функції, яка об'єднує результати декількох тестувань. Запропонований методичний підхід враховує результати, обчислені з застосуванням дев'яти різних типів згорток, та забезпечує стійку інтегральну оцінку рівня сформованості ІКК фахівців.

Література

педагогічний тестування фахівець

1. Аванесов В.С. Современные методы обучения и контроля знаний / В.С. Аванесов. - М.: ИЦПКПС, 1998. - 99 с.

2. Аветисов А.А. Основные положения системно-квалиметрической концепции повышения качества образования / А.А. Аветисов // Надежность и контроль качества. - 1999. - № 2. - С. 57-60.

3. Бермус А.Г. Управление качеством профессионально-педагогического образования: [монографія] / А.Г. Бермус. - Ростов н/Д.: РГПУ, 2002. - 288 с.

4. Беспалько В.П. Программированное обучение. Дидактические основы / В.П. Беспалько. - М.: Наука, 1970. - 300 с.

5. Гермейер Ю.Б. Введение в теорию исследования операций / Ю.Б. Гермейер. - М.: Наука, 1971. - 383 с.

6. Гутник Г.В. Качество образования как системообразующий фактор образовательной политики / Г.В. Гутник // Современная школа. - 1999. - № 1. - С. 24.

7. Ефремова Н.Ф. Подходы к оцениванию компетенций в высшем образовании: [учеб. пособие] / Н.Ф. Ефремова. - М.: ИЦПКПС, 2010. - 216 с.

8. Петращук О.П. Тестовий контроль у навчанні іноземної мови в середній загальноосвітній школі: [монографія] / О.П. Петращук. - К.: Видавничий центр КДПУ, 1999. - 261 с.

9. Селезнева Н.А. Качество высшего образования как объект системного исследования: [лекция-доклад] / Н.А. Селезнева. - М.: ИЦПКПС, 2003. - 95 с.

10. Субетто А.И. Оценочные средства и технологии аттестации качества подготовки специалистов в вузах: методология, методика, практика / А.И. Субетто. - СПб.; М.: ИЦПКПС, 2004. - 68 с.

11. Челышкова М.Б. Основные подходы к оценке подготовки обучаемых в России и за рубежом / М.Б. Челышкова. - М.: ИЦПКПС, 1999. - 62 с.

12. Bachman L.F. Fundamental considerations in language testing / L.F. Bachman. - Oxford: Oxford University Press, 1990. - 408 p.

13. Linn R.L. Educational measurement / R.L. Linn. - Washington, DC: American Council on Education, 1989. - 610 p.

14. Wainer H. Computerized adaptive testing: A primer / H. Wainer. - Mahwah, NJ: Lawrence Erlbaum Associates, 1990 - 360 p.

Размещено на Allbest.ru