Технология компьютерного тестирования
опыты и эксперименты

Технологии компьютерного тестирования

Сегодня применения информационно-коммуникационных технологий в образовательном процессе  широко используется и охватывает все вопросы, связанные с организацией не только учебного процесса, но и организацией  контроля его результативности.

Многообразие задач диагностики обусловливает  значительное количество методов диагностики. Часть методов не поддается алгоритмизации и, как следствие, реализации в форме компьютерной программы, которая могла бы провести диагностику в автоматизированном режиме.  Однако, некоторые методы (в частности, тестирование) это позволяют сделать, поскольку изначально имеют характер технологии. Именно возможность автоматизации процедур опроса и оценки ответов учащегося позволяет применять тестовые технологии в отсутствии педагога и даже дистанционно. Компьютерное тестирование обладает целым рядом  достоинств, которых нет в традиционном  тестировании. А именно, высвобождение времени педагога от многочасовой проверки бумажных вариантов, так же, тестируемый имеет возможность сразу после тестирования увидеть свои результаты.

Компьютерное тестирование основывается на представлениях классической теории, оно обладает целым рядом специфических особенностей в части разработки тестов и их применении.

Преимущества компьютерного тестирования

Все те достоинства бланковой  тестовой формы контроля успешности обучения, безусловно, в полной мере относятся и к компьютерной форме тестирования (технологичность, оперативность, объективность оценки). Вместе с тем, применение технологий компьютерного тестирования  не были бы  педагогически оправданным, если бы они просто повторяли «безмашинные» (бланковые). Компьютерные тесты предоставляют пользователю (в первую очередь, педагогу) принципиально новые возможности, которые и определяют целесообразность использования ТКТ.

Важнейшими из них являются:

- автоматизация процедуры опроса, что обеспечивает возможность осуществления тестирования без непосредственного участия учителя; частным проявлением данного качества следует считать возможность организации самоконтроля обучаемых и дистанционного (удаленного) контроля;

- расширение сферы использования тестовых технологий за счет того, что в задания могут быть включены мультимедиа-объекты (звук, статическая и динамическая графика, видео) – это открывает принципиально новые возможности применения тестирования для оценки успешности освоения языковых дисциплин,

- расширение спектра ответных действий тестируемого – помимо «отметить» и «написать» в бланковом тестировании (в компьютерном они реализуются с клавиатуры), дополнительно появляются манипуляции с мы-шью: отметить щелчком, указать область, переместить объект по экрану это открывает принципиально новые возможности конструирования заданий (например, построение конечного изображения на экране из отдельных заготовок);

- оперативность оценивания ответа и вывод итога непосредственно по завершении тестирования;

- возможность автоматизированной обработки результатов с целью формирования выходных форм результативности, а также оценки качества теста, что избавляет учителя от необходимости осуществления расчетных алгоритмов;

- более высокая защищенность измерительных материалов, поскольку используется не вариантный (принятый в бланковом тестировании) подход

к построению индивидуального теста, что приводит к возможности заимствования ответов между учащимися , а фасетный который позволяет сгенерировать, практически, неограниченное число индивидуальных вариантов;

- возможность индивидуализации текущего контроля за счет использования настраиваемой оценочной шкалы и адаптивных алгоритмов тестирования.

 Задачи и функции компьютерного тестирования

Основные задачи современных систем компьютерного тестирования :

Создание и хранение тестовых заданий

-обрабатывать исходный авторский материал;

-вносить необходимые изменения и дополнения;

- назначить и поддерживать реквизиты тестовых заданий;

- выполнять автоматизированную компоновку тестов;

- проводить анализ результатов тестирования;

- хранить и передавать информацию.

Для эффективного решения задачи создания и хранения тестовых зада-

ний в системе компьютерного тестирования должны быть реализованы сле-

дующие базовые функции:

1) Работа с разными типами тестовых заданий:

- с множественным выбором;

- с множественным ответом;

- с дополнением;

- со свободным ответом;

-на установление соответствия;

-на выявление последовательности.

2) Назначение весовых коэффициентов заданиям и ответам.

3) Проверка орфографии, поиск по ключевым словам и реквизитам.

4) Использование в тестовых заданиях форматированного текста, графики,

звука, видеофрагментов, активных программных элементов.

5) Подготовка шаблонов, импорт/экспорт содержимого тестовых заданий.

6) Архивация и восстановление необходимой информации.

Общие требования к системам КТ

Исходя из функций и сервисов, которые должна предоставлять система компьютерного тестирования учителю и учащимся, можно сформулировать ряд общих требований к ним.

1. Комплексность – система должна обеспечивать весь цикл тестирования –

разработка теста, предъявление его учащемуся, прием и оценивание его ответов, сбор и анализ статистической информации.

2. Надежность в работе – невосприимчивость к попыткам некорректного

ввода ответов (например, предполагается числовой ответ, а вводится буква) и другим несанкционированным действиям сдающего; сохранение промежуточных результатов (ответов) с возможностью возобновления процедуры после нештатного ее прерывания; устойчивость функционирования в локальной или глобальной сети.

3. Производительность – возможность параллельного обслуживания многих

сдающих, быстрое оценивание результата сдачи, оперативность передачи данных (заданий, результатов) в сетевых режимах использования, малое время отклика серверных приложений, малое время обработки конечных результатов.

4. Масштабируемость – возможности использования СКТ на отдельных компьютерах, в локальных сетях и, возможно, в глобальной сети.

5. Защищенность – обеспечение невозможности доступа сдающих к эталон-

ным ответам, учащихся и посторонних лиц – к общим результатам тести-

рования.

6. Мультимедийность – возможность встраивания в тестовые задания муль

тимедийных объектов, а также разнообразие анализаторов ответов сдающего (клавиатура, мышь).

7. Полнота типов тестовых заданий – обязательная поддержка пяти основ-

ных типов тестовых заданий (открытого типа и закрытого: одиночный и

множественный выбор, соответствие, установление последовательности).

8. Поддержка фасетирования тестовых заданий.

9. Простота эксплуатации для преподавателя и учащегося – стандартный

современный интерфейс, четкое и эффективное разделение на функциональные подсистемы, ориентация на стандарты в информационной индустрии, единый стиль оформления программ, документация для каждой

группы пользователей, прозрачный смысл настраиваемых параметром, наглядная и удобная для педагога форма представления итогов тестирования

(включая оценку качества теста).

Классификация систем КТ

В соответствии с описанными выше требованиями к системам компьютерного тестирования их классификацию можно строить по различным основаниям.  

По назначению

1) самоконтроль учащихся в процессе обучения;

2) подготовка к сдаче итоговых экзаменов;

3) апробация тестовых материалов.

По возможности использования мультимедийных объектов

- без поддержки мультимедиа (алфавитно-цифровые);

-с поддержкой статической графики (в стандартных графических форматах);

- с поддержкой звуковых фрагментов;

- с поддержкой анимации (например, flash или gif);

- с поддержкой видео.

По сетевому решению

-  Автономные компьютеры без выхода в Интернет.

-Автономные компьютеры, среди которых один имеет выход в Интернет.

носители информации, резко увеличивая временные и трудовые затраты.

-Автономные компьютеры, каждый из которых имеет выход в Интернет.

Анализ имеющихся (доступных) систем КТ

Рассмотрим сервисы, которые позволяют создавать, редактировать и

проводить тестирование. Все эти сервисы с русскоязычным интерфейсом и

имеют большие коллекции разнообразных тестов, которые также может использовать учитель или учащийся в своей деятельности.

Наиболее доступные сервисы:

1) Сервис «БанкТестов.РУ».

2) Сервис «Мастер-тест».

3) Портал "Твой тест".

4) Mr. Tester.

5) iGiveTest.

6) RuTester.Net.

7) Online Test Pad.

Учитывая возможности данных сервисов и сайтов, рассмотрим  рекомендации, которые могут быть полезны учителям .

Сравнительный анализ Online-сервисов показывает, что наилучшим вариантом для создания и проведения тестирования в учебных заведениях являются сервисы «Мастер-тест» и «Online Test Pad», так как в них наиболее

полно реализован набор функций, необходимый для создания, проведения и

интерпретации результатов тестирования.

Бесплатный доступ к ресурсам и функциям сайта;

- поддержка разнотипных заданий;

- отсутствие регистрации для прохождения теста (как следствие экономия

времени на заполнение окна регистрации);

-наличие помощника по созданию тестов, в том числе видео-уроков;

- реализация мультимедийных элементов (изображений, видео, звуковых

файлов, форматированный текст и др.);

-высокий уровень секретности.

Обработка результатов КТ

В классическом тестировании нахождение итога осуществляется за два

шага:

1) проверка результатов выполнения каждого задания

2) суммирование результатов по всем заданиям, определение конечного балла. Эти же шаги можно выделить и при компьютерном тестировании, хотя в их реализации появляется определенная специфика.

Методика проведения компьютерного тестирования

В организации и проведении компьютерного тестирования можно вы-

делить ряд действий, которые должны быть осуществлены учителем:

-технологическая проверка;

-обеспечение готовности учащихся;

- помощь учащимся в процессе тестирования;

- обработка результатов тестирования.

Подготовка технологий может состоять в установке банка заданий и опросника на сервер локальной сети учебного класса, проверки совместимости

форматов предъявляемых в тесте объектов с операционной системой компьютеров (рабочих станций), проверке устойчивости и скорости работы программы при параллельном обслуживании многих пользователей. Безусловным и обязательным должно быть пробное тестирование, проведенное самим учителем. Цель этого этапа – исключить возможные технические причины, которые могут привести к «зависаниям» системы в процессе опроса, выходу из системы без сохранения промежуточных результатов , неполного предъявления учащемуся всей информации тестового задания В готовности учащегося к компьютерному тестированию можно выделить две составляющие:

- психологическая, которая состоит в положительном отношении учащегося к компьютерному тестированию как форме контроля, интерес к ней и желание испробовать на себе, отсутствие боязни и иных негативных эмоций;

- процессуальная, состоящая в знании порядка собственных действий при

тестировании, начиная с регистрации, понимании предлагаемого экранного интерфейса, свободном владении приемами ввода информации при выполнении тестовых заданий различной формы (работа с клавиатурой, манипуляции мышью).

Подготовка учащихся обеспечивается разъяснениями преподавателя

содержания и структуры теста, электронными тренажерами и курсами обучения основным приемам работы за компьютером, необходимым для выполнения типовых тестовых заданий. Однако наиболее эффективным в плане подготовки учащихся следует признать проведение репетиционного тестирования в обстановке максимально приближенной к сдаче реального компьютерного теста.

Следует заметить также, что такая всеобъемлющая подготовка необходима, как правило, при первом знакомстве учащихся с тестовой системой. Если преподаватель достаточно часто применяет компьютерную форму тестирования, например, при проведении текущего контроля, психологические и процессуальные проблемы не возникают.

Помощь учащимся в процессе тестирования осуществляется индивидуально и может состоять только в процессуальной консультации (каким образом ввести ответ? почему не отрабатывается какой-то элемент интерфейса? и

т.п.). Никой помощи, связанной с содержательными аспектами задания и его

трактовкой, оказываться не может даже в том случае, если задание будет

сформулировано не вполне корректно. В последнем случае преподаватель

может сделать соответствующую поправку при выведении итогового результата тестирования.

Обработка результатов компьютерного тестирования, состоит в оценке результатов учащегося, а также выявлении качественных характеристик отдельных тестовых заданий и теста в целом. Безусловно, необходимые для

этого операции преподаватель производит не «вручную», а с применением

компьютерной техники. При этом можно выделить два основных варианта:

 блок (модуль) обработки входит в СТС – в этом случае обработка результатов и их перенос в базу результатов производится автоматически в соответствии с начальными настройками .

 СТС обеспечивает лишь экспорт результатов (матрицы тестирования) в

какую-либо систему обработки числовых данных, например, Excel.

Первый вариант, безусловно, предпочтительнее для учителя-пользователя. Однако во многих системах выявление статистических характеристик качества теста не предусмотрено, что затрудняет его корректировку.

Во втором случае преподаватель должен сам ввести алгоритмы обработки, но при этом он получает возможность выявить именно те характеристики, которые ему требуются, и, что очень важно, произвести моделирование исправленного теста.

Представленные возможности ИКТ позволяют сделать вывод о педагогической целесообразности и дидактической значимости использования их средств при реализации системно-деятельностного подхода не только для формирования (развития), но и для диагностики уровня сформированности (развития) всех основных компонентов УУД обучающихся, а диагностические задания можно рассматривать как совокупность целенаправленных дидактических заданий, способствующих созданию учителем дополнительного диагностического фона.

Итоговый диагностический вывод об уровнях сформированности УУД

обучающихся может быть сделан только на основе сопоставления результатов освоения материала нескольких учебных дисциплин. Поэтому использование электронных таблиц (google-таблиц) позволит учительскому коллективу сопоставить результаты диагностики уровня сформированности УУД в разных учебных дисциплинах и настроить автоматический вывод итогового диагностического суждения для каждого отдельного ученика.

Список литературы:

1. Методика использования информационно-коммуникационых

технологий в учебном процессе. ./  под ред. Б.Е. Стариченко, М.Ю. Мамонтова, А.В. Слепухин. – Екатеринбург, 2014г.

2. https://www.rki.today/2018/09/5.html