Запис Детальніше

Fields of application of computer-based tests of educational achievement

Журнал "Теорія та методика електронного навчання"

Переглянути архів Інформація
 
 
Поле Співвідношення
 
Title Fields of application of computer-based tests of educational achievement
Направления применения компьютерно ориентированного тестирования учебных достижений
Напрями застосування комп’ютерно орієнтованого тестування навчальних досягнень
 
Creator Білоусова, Людмила Іванівна; Kharkiv National Pedagogical University named after G. S. Scovoroda
Колгатін, Олександр Геннадійович; Kharkiv National Pedagogical University named after G. S. Scovoroda
 
Subject —
—
—
—
 
Description The purpose of this paper is to ground the specific requirements for automated systems of pedagogical testing according to their didactic purpose.
Целью данной работы является обоснование специфических требований к автоматизированным системам педагогического тестирования в соответствии с их дидактическим назначением.
Комп’ютерно орієнтоване тестування навчальних досягнень застосовується в навчальному процесі для вирішення різноманітних дидактичних завдань, в кожному з яких проявляються усі дидактичні функції діагностики та контролю, але деякі з них є провідними. Традиційно тестування пов’язується з реалізацією контрольної функції при оцінюванні навчальних досягнень під час поточного, тематичного або підсумкового контролю. Комп’ютерно орієнтоване тестування є потужним методом самоконтролю (провідними є функція контролю й систематизуючо-регулятивна функція). Важливим напрямом застосування педагогічного тестування є діагностика студента з метою вибору варіанту реалізації технології навчання (провідні функції – реалізація механізму зворотного зв’язку, прогностична та систематизуючо-регулятивна). Комп’ютерно орієнтоване тестування з успіхом застосовується у навчальному процесі для актуалізації опорних знань (навчальна, стимулювально-мотиваційна функції та функція контролю), застосування завдань у тестовій формі для створення проблемної ситуації під час вивчення нового матеріалу (навчальна, розвивальна та стимулювально-мотиваційна функції), відпрацювання навичок за допомогою тестів-тренажерів (навчальна та стимулювально-мотиваційна функції), організація навчальних змагань, вікторин тощо (навчальна, виховна та стимулювально-мотиваційна функції). Окремо слід відзначити комп’ютерно орієнтоване тестування високої значимості (high stake assessment), коли за результатами вимірювання здійснюється розподіл студентів або школярів, наприклад, процедура відбору абітурієнтів до вищого навчального закладу (провідними є функція контролю та прогностична функція). Кожне дидактичне завдання висуває специфічні та суперечливі вимоги до відповідної автоматизованої системи тестування, що потребує спеціалізації таких систем.Метою даної роботи є обґрунтування специфічних вимог до автоматизованих систем педагогічного тестування у відповідності з їх дидактичним призначенням.Системи тематичного й підсумкового оцінювання мають забезпечити високу надійність тестових результатів, зручні та надійні засоби їх обліку результатів, захист даних від несанкціонованого використання та спотворення. Якщо оцінка виставляється в автоматичному режимі без втручання викладача, то особливої уваги потребує процедура формування оцінки за шкалою, яку затверджено в навчальному закладі або на рівні держави. Так у загальноосвітній школі за діючими критеріями оцінювання застосовується критеріально орієнтована 12-бальна шкала за рівнями навчальних досягнень. Для правильного оцінювання за такою шкалою завдання тесту мають бути класифіковані за рівнями навчальних досягнень і автоматизована система тестування має враховувати структуру бази завдань для визначення оцінки. У вищих навчальних закладах у разі використання рейтингових шкал оцінювання, наприклад ECTS, слід застосувати нормоорієнтовану інтерпретацію результатів. Для підсумкового оцінювання доцільно застосовувати стандартизовані тести.Для забезпечення надійності тестових результатів багатоваріантного тесту доцільно застосовувати адаптивне тестування на основі моделі Г. Раша. Але підготовка такого тесту потребує створення великої бази тестових завдань і ретельної їх апробації, що пов’язано зі значними витратами. Якщо така підготовка тесту неможлива, доцільно застосовувати тест з фіксованим переліком завдань для усіх тестованих, щоб виключити розбіжність трудності варіантів тесту та забезпечити справедливе оцінювання.Тести для поточного оцінювання часто створюються безпосередньо викладачем. На виконання таких тестів у навчальному процесі відводиться небагато часу, тому вони складаються з невеликої кількості завдань і не забезпечують надійність, достатню для автоматичного оцінювання. Викладач особисто виставляє оцінку з урахуванням кількості правильно виконаних завдань тесту та результатів інших видів контролю (співбесіда, опитування, участь студента у дискусії, виконання лабораторної роботи тощо). Головні вимоги до системи автоматизованого тестування, що застосовується для поточного оцінювання – це зручність і простота інтерфейсу, зокрема зручні засоби створення та редагування завдань і тесту, відсутність зайвих сервісів і налагоджувань, збереження усіх відповідей студента для аналізу (краще на сервері викладача), зручні засоби перевірки якості тестових завдань.Важливим напрямом застосування автоматизованих систем тестування навчальних досягнень є самоконтроль. Оскільки студент може виконувати тест багаторазово, має здійснюватися випадковий вибір завдань з досить великої бази. Щоб не перевантажувати слабких студенів складними завданнями та не втомлювати добре підготовлених студентів дуже простими завданнями, система має бути адаптивною. Доцільно зберігати детальну інформацію про перебіг тестування та його результати на сервері з метою аналізу якості тестових завдань і забезпечення студенту можливості побачити власні досягнення у порівнянні з результатами інших учасників тестування. Збереження результатів тестування на сервері в умовах позааудиторної роботи студента передбачає on-line тестування із застосуванням мережі Інтернет. Доцільно поєднувати самоконтроль з педагогічною діагностикою студента, у такому разі до системи автоматизованого тестування висуваються додаткові вимоги, які розглядатимуся далі.Головним завданням автоматизованого тестування в системі педагогічної діагностики є забезпечення високої інформативності тестових результатів, накопичення даних для формування педагогічного прогнозу. Система має накопичувати результати тестування в динаміці для педагогічного прогнозування та оперативного контролю якості бази тестових завдань. Обов’язковою умовою якісної діагностики є репрезентативність завдань відповідно до структури навчального матеріалу. За результатами діагностики обирається напрям подальшого навчання, при цьому деякі шляхи утворюють цикли – студент багаторазово виконує той самий тест і система тестування має забезпечити варіативність завдань. Паралельні варіанти тесту повинні мати однакову трудність і еквівалентно відображати зміст навчального матеріалу. Сполучення вимоги варіативності з необхідністю забезпечити репрезентативність і паралельність варіантів тесту чинить суттєві перепони розробникам програмного забезпечення. Успішні кроки в напряму вирішення цієї проблеми пов’язані з систематизацією випадкового вибору завдань з бази даних. Педагогічне прогнозування базується на особливостях засвоєння матеріалу за рівнями навчальних досягнень – тому система діагностики має забезпечити окреме опрацювання результатів за рівнями навчальних досягнень. Для прийняття рішень щодо вибору доцільного варіанту реалізації технології навчання важливо знати, які саме елементи навчального матеріалу слабко засвоєні – звідси випливає необхідність окремого опрацювання результатів за елементами навчального матеріалу. Система має бути адаптивною – складні завдання мають пропонуватися тільки тим студентам, які готові до їх сприйняття.Розглянемо відомі автоматизовані системи тестування навчальних досягнень з точки зору їх відповідності до специфічної системи вимог стосовно педагогічної діагностики.Як бачимо за результатами аналізу (табл. 1), кожна вимога виконується більшістю з розглянутих автоматизованих систем, але поєднання варіативності тесту з дотриманням стабільності його трудності та, одночасно, репрезентативності системи завдань відносно структури навчального матеріалу є актуальним напрямом розробки програмного забезпечення педагогічного тестування.Таблиця 1Автоматизовані системи тестування навчальних досягнень і вимоги до їх застосування з метою педагогічної діагностики Автоматизована системаВідповідність вимогамВаріативністьРепрезентативність щодо структури навчального матеріалуСтабільність трудності тестуОкреме опрацювання результатів за рівнями навчальних досягненьОкреме опрацювання результатів за елементами навчального матеріалуОперативність опрацювання результатів та їх інтерппретаціїНакопичування всіх відповідейРеалізація адаптивного алгоритмуКритеріально орієнтований підхід до інтерпретації тестових результатів«EXAMINER-II», 1993 [1]+––––+––+«OpenTest2», 2004 [2]++–––++–+«Експерт», 2003 [3] +++++++++“WEB-EXAMINER”, 2005 [4]+–+––++++“WebTutor”, 2008-2011 роки, [5]++––+++–+«Інформаційна система ВНЗ 2.0.1», 2008 [6]++–––++–+«Телетестинг», 1999 [7]+–+––++++Moodle [8]±  ––++–+UniTest System, 2001-2006 [9]++–––++
 
Publisher State institution of higher education «Kryvyi Rih National University»
 
Contributor —
—
—
 
Date 2013-11-27
 
Type info:eu-repo/semantics/article
info:eu-repo/semantics/publishedVersion
—
—
—
 
Format application/pdf
 
Identifier http://ccjournals.eu/ojs/index.php/e-learn/article/view/212
 
Source Theory and methods of e-learning; Vol 3 (2012); 09-14
Теория и методика электронного обучения; Vol 3 (2012); 09-14
Теорія та методика електронного навчання; Vol 3 (2012); 09-14
2309-1495
 
Language ukr
 
Relation http://ccjournals.eu/ojs/index.php/e-learn/article/view/212/201