Контроль качества обучения
методическая разработка на тему

СОГБПОУ «Рославльский  многопрофильный  колледж»

Тема самообразования педагога: «Контроль качества обучения»

Автор разработки –Шашнина И.О.

2014/2018 уч. год

Введение.

Разработка новых государственных стандартов в профессиональном образовании и внедрение новых технологий обучения повлекли за собой необходимость использования новых подходов к системе контроля и проверки соответствия требований к подготовке выпускников заданным уровневым стандартам знаний. В системе профессионального образования существует широкий арсенал видов контроля и оценки.

1. Оценка качества результатов обучения

Диагностика в педагогическом процессе понимается, как термин "контроль в учебном процессе", в смысле прояснения всех обстоятельств протекания дидактического процесса, точного определения результатов последнего. Без диагностики невозможно эффективное управление дидактическим процессом, достижение оптимальных результатов, определенных целями обучения. В послед­нее время в педагогической литературе категорию "диагностиро­вание обученности" рассматривают как последствия достигнутых результатов обучаемости.

Диагностирование рассматри­вает результаты в связи с путями, способами их достижения, выяв­ляет тенденции, динамику формирования продуктов обучения. Диагностирование включает в себя контроль, проверку, оценивание, накопление статистических данных, их анализ, выявление динамики, тенденций, прогнозирование дальнейшего развития событий.

Контролирование, оценивание знаний, умений обучаемых вклю­чаются в диагностирование как необходимые составные части. Это очень древние компоненты педагогической технологии. Возникнув на заре цивилизации, контролирование и оценивание являются непременными спутниками высшей школы, сопровождают ее разви­тие. Тем не менее но сей день идут жаркие споры о смысле оценивания, его технологии. Как и сотни лет назад, педагоги спорят, что должна показывать оценка, должна ли она быть индикатором качества — категорическим определением успеваемости обучаемого или же, наоборот, должна существовать как показатель преиму­щества и недостатков той или иной системы (методики) обучения.

В нынешней теории педагогики еще нет установившегося подхода к определению понятий "оценка", "контроль", "проверка", "учет" и других, с ними связанных. Нередко они смешиваются, взаимозамещаются, употребляются то в одинаковом, то в различном значе­нии.

Общим родовым понятием выступает "контроль", означающий выявление, измерение и оценивание знаний, умений обучаемых. Выявление и измерение называют проверкой. Поэтому проверка — составной компонент контроля, основной дидактической функцией которого является обеспечение обратной связи между преподавателем и обучающимися, получение педагогом объективной информации о степени освоения учебного материала, своевременное выявление недостатков и пробелов в знаниях. Проверка имеет целью определе­ние не только уровня и качества обученности обучающегося, но и объема учебного труда последнего. Кроме проверки, контроль содер­жит в себе оценивание (как процесс) и оценку (как результат) про­верки. В ведомостях успеваемости, базах (банках) данных и т.д. оценки фиксируются в виде отметок (условных обозначений, кодовых сигналов, "зарубок", памятных знаков и т.п.).

Основой для оценивания успеваемости обучающегося являются итоги (результаты) контроля. Учитываются при этом как качествен­ные, так и количественные показатели работы обучающихся. Коли­чественные показатели фиксируются преимущественно в баллах или процентах, а качественные в оценочных суждениях типа "хорошо", "удовлетворительно" и т.п. Каждому оценочному суждению припи­сывается определенный, заранее согласованный (установленный) балл, показатель (например, оценочному суждению "отлично" — балл 5). Очень важно при этом понимать, что оценка — это не число, получаемое в результате измерений и вычислений, а приписанное оценочному суждению значение. Количественные манипуляции с оценочными суждениями (баллами) недопустимы. Чтобы избежать соблазна использовать оценки как числа, во многих странах мира они имеют буквенное обозначение, например А, В, С и т.д.

Количественное значение уровня обученности получается тогда, когда оценку понимают (и определяют) как соотношение между фактически усвоенными знаниями, умениями и общим объемом этих знаний, умений, предложенным для усвоения. Показатель усвоения (продуктивности обучения) вычисляется из соотношения:

О = (Ф/П) • 100% ,

где О — оценка успеваемости (обученности, продуктивности), Ф — фактический объем усвоенных знаний, умений; П — полный объем знаний, умений, предложенных для усвоения. Как видно, показатель усвоения (оценка) здесь колеблется между 100% — полное усвоение информации и 0% — полное отсутствие такового.

Для определения оценки по этому критерию необходимо на­учиться измерять объемы усвоенной и предложенной информации. Эта задача решена на уровне удобной практической технологии.

Функции оценки, как известно, не ограничиваются только констатацией уровня обученности. Оценка — единственное в распо­ряжении педагога средство стимулирования учения, положительной мотивации, влияния на личность. Именно под влиянием объективного оценивания у студентов создается адекватная самооценка, критическое отношение к своим успехам

 С этой точки зрения ныне действу­ющая система оценивания знаний, умений требует пересмотра с целью повышения ее диагностической значимости и объективности.

Важнейшими принципами диагностирования и контролирования обученности (успеваемости) обучающихся являются объективность, систематичность, наглядность (гласность). Объективность заключа­ется в научно-обоснованном содержании диагностических тестов (заданий, вопросов), диагностических процедур, равном, дружеском отношении педагога ко всем обучаемым, точном, адекватном уста­новленным критериям оценивании знаний, умений. Практически объективность диагностирования означает, что выставленные оценки совпадают независимо от методов и средств контролирования и педагогов, осуществляющих диагностирование.

Требование принципа систематичности состоит в необходимости проведения диагностического контролирования на всех этапах дидак­тического процесса — от начального восприятия знаний и до их практического применения. Систематичность заключается и в том, что регулярному диагностированию подвергаются все обучаемые с первого и до последнего дня пребывания в учебном заведении. Контроль необходимо осуществлять с такой частотой, чтобы надежно проверить все то важное, что обучаемым надлежит знать и уметь. Принцип системности требует комплексного подхода к проведению диагностирования, при котором различные формы, методы и средства контролирования проверки, оценивания используются в тесной взаимосвязи и единстве, подчиняются одной цели. Такой подход исключает универсальность отдельных методов и средств диагностирования.

Принцип наглядности (гласности) заключается прежде всего в проведении открытых испытаний всех обучаемых по одним и тем же критериям. Рейтинг каждого обучающегося, устанавливаемый в процессе диагностирования, носит наглядный, сравнимый характер. Принцип гласности требует также оглашения и мотивации оценок. Оценка — это ориентир, по которому обучаемые судят об эталонах требований к ним, а также об объективности педагога. Необходимым условием реализации принципа является также объявление результа­тов диагностических срезов, обсуждение и анализ их с участием заинтересованных людей, составление перспективных планов ликви­дации пробелов.

Диагностировать, контролировать, проверять и оценивать знания, умения обучающихся нужно в той логической последовательности, в какой проводится их изучение.

Качество усвоения студентами подлежащего изучению материала, приобретенного (усвоенного) ими опыта и, следовательно, деятель­ности, которую они могут осуществлять в результате обучения, может характеризоваться уровнями усвоения (деятельности). Напомним их.

1-й уровень — уровень представления (знакомства). Студент, выведенный на этот уровень, способен узнавать объекты и процессы, если они представлены ему сами (в материальном виде) или даны их описание, изображение, характеристика. На этом уровне студент обладает знанием-знакомством и способен опознать, различить и соотнести эти объекты и процессы.

2-й уровень — уровень воспроизведения. Студент может воспроиз­вести (повторить) информацию, операции, действия, решить типо­вые задачи, рассмотренные при обучении. Он обладает знанием-копией.

3-й уровень — уровень умений и навыков. На этом уровне усвоения студент умеет выполнять действия, общая методика и последователь­ность (алгоритм) которых изучены на занятиях, но содержание и условия их выполнения новые. Здесь различают две разновидности усвоения: умение, когда студент выполняет действия после довольно продолжительного предварительного продумывания последователь­ности и способов их осуществления, навык, когда действие выпол­няется автоматически. Обдумывание каждой предстоящей операции резко "свернуто" во времени. Создается впечатление, что исполни­тель работает "не думая".

4-й уровень — уровень творчества. Как известно, творчеством считают проявление продуктивной активности человеческого сознания. Например, рационализаторство и изобретательство, работа по реконструкции в ходе реального курсового проектирования, при участии в научно-исследовательской работе. Чтобы вывести студента на уровень творчества, недостаточно, чтобы он овладел знаниями, умениями и навыками по определенному, пусть даже весьма широкому набору учебных элементов. Необходимо обучить его умению самостоятельно "добывать" необходимые знания и умения. Нужно пробудить и развить в нем творческие склонности. А это возможно только при условии, что в процессе обучения будут применяться специальные творческие задачи научно-исследователь­ской, проектной, конструкторской, технологической деятельности, т.е. будут реализовываться мотивационные знания.

Для достижения любого уровня усвоения студент должен осу­ществить учебную деятельность (УД), состоящую из трех видов действий: ориентировочной основы действия (ООД), исполнитель­ских действий (ИД) и контрольных действий (КД), выполняемых студентами обычно с помощью преподавателя:

УД = ООД + ИД + КД.

Здесь ООД заключается в получении студентами необходимой информации, осознании поставленной перед ними задачи усвоения. С помощью полученных от преподавателя инструктажа и ориенти­ровки они выбирают пути, средства и методы (выбирают программу) ее решения; ИД состоят в интеллектуальной переработке полученной инфор­мации и выполнении упражнений с целью усвоения знаний, умений и навыков. Студент выполняет программу, разработанную в ходе ООД; КД — действия, с помощью которых проверяются полнота, правильность и качество выполнения ООД и ИД.

Приведенные выше характеристики контроля качества знаний и умений весьма условны. Качество обучения, по С.И.Архангельс­кому [4], рассматривается как способность студентов выполнять определенные требования, поставленные перед ними, с учетом целей и задач изучения того или иного предмета.

Состояния учебного процесса и знаний, как известно, всегда относительны. Отсюда, естественно, возникают вопросы:

а) можно ли вообще что-либо относительное измерить абсолютно?

б) не лучше ли говорить об относительных единицах измерения в учебном процессе?

в) насколько нуждается оценка учебного процесса в абсолютно-точных измерителях?

Для учебного процесса измерения нужны как инструмент, с помощью которого можно объективно оценивать результаты, обеспе­чивать его упорядочение и осуществлять управление. Характерно и то, что от такого инструмента требуется определение не только "статической картины" тех или иных результатов обучения, но и динамики учебного процесса.

По С.И. Архангельскому, педагогическая оценка — это после­довательность действий преподавателя, включающая в себя поста­новку цели, разработку контрольного задания (вопроса), организа­цию, проведение и анализ результатов деятельности, реализация которых в учебном процессе приводит к заключению, обуславли­вающему цели проверки и ее конечный вывод — отметку в зачетной книжке студента. Следовательно, отметка — это заключение о результатах (успехах) обучения и воспитания студента, сделанное на основании оценочной деятельности преподавателя и выраженное в принятой системе градации (ранговой или функциональной).

Оценка призвана отражать в единстве его количественную и качественную стороны. Под качественной оценкой следует понимать такие действия преподавателя, которые направлены на выявление и опознание существенных характеристик объекта, их анализ. Количественная же оценка в этой процедуре выступает как бы вторым действием. Она имеет дело с теми же качественными харак­теристиками, но уже наделяет их традиционными свойствами: дает им меру, формирует принцип дискретности (способ членения), определяет нормы и эталоны, присваивает цену деления шкалы "измерения" и др.

Рассматривая педагогическую оценку как результат сравнения, сопоставления и обобщения в единстве качественных и количествен­ных сторон изучаемого объекта, нельзя противопоставлять одну ее грань другой. Речь может идти лишь о целесообразности дополнения и углубления каждой отдельно взятой характеристики более тонкими традициями. И в этой части количественная оценка по отношению к качественной всегда выступает вторичной и является производной от первой.

Объектом педагогической оценки в учебном процессе является деятельность студентов, предметом — результаты этой деятельности, выраженные в различных качественных характеристиках. Наиболее представительными из них выступают обученность и воспитанность. Как косвенный критерий может выступать развитость способностей студентов.

Обученность — одно из существенных качеств студента, отража­ющее его способность оперировать знаниями и умениями при ре­шении теоретических и практических задач, которые приобретаются им в действиях над конкретным учебным материалом. И чем больше пройдет через его сознание и практику разнообразного по содержа­нию и форме учебного материала в изменяющихся ситуациях деятельности, тем эта способность будет богаче умениями, прочнее обобщением и тем мобильнее она будет проявляться в его деятель­ности.

Обученность (в узком смысле слова) — это способность студента применять усвоенные знания для выполнения конкретного учебного задания и достигать определенного темпа деятельности.

Воспитанность — это показатель сформированных отношений студентов к окружающему их миру (к людям, событиям, вещам и т.д.), которые реализуются в их социальной деятельности, в умствен­ных и практических действиях при решении общественных задач.

В качестве оценки воспитанности может выступать готовность при­ложения этих отношений к реальной действительности в полном соответствии с социальными нормами общества. В последнем заклю­чается качественная сторона воспитанности. Отсюда следует, что школа воспитанности имеет как положительные, так и отрицатель­ные значения, граница между которыми, точка отсчета — "нуль".

Педагогическая оценка обладает рядом фундаментальных свойств: объективностью, всесторонностью, качественной и количественной определенностью (детерминированностью), точностью, надежностью, современностью, результативностью и др.

Все разнообразие качественных и количественных критериев в педагогике принято делить на два подмножества, соответственно отражающих воспитательные и дидактические функции преподава­теля. В первое подмножество, как правило, включают три группы критериев: для оценки эффективности средств и методов индиви­дуального воспитательного воздействия в текущем учебном про­цессе, для оценки системы организации и методик количественного (общественного) воспитательного воздействия в ходе учебного про­цесса и, наконец, для оценки результатов воспитания студентов на завершающих этапах обучения. Ко второму относятся дидактические критерии, имеющие прямое отношение к учебному материалу, заданиям, пособиям и учебникам; критерии оценки деятельности студентов по овладению учебными программами с отражением результатов формирования знаний, умений и навыков и развития их способностей и, наконец, критерии, связанные с оценкой конеч­ных результатов обучения, деятельности преподавателя, оптимиза­цией средств и методов учебной работы. Изложенная выше информа­ция изображена на рис. 6.1.

Приведенная из работы Архангельского С.И. структурная схема оценки качества оцениваемого объекта не претендует на исчерпывающий вариант оценки педагогического процесса. Разработка новых (содержатель­ных) критериев является первоочередной задачей оценки качества подготовки обучающихся и методики преподавания. Эта задача сложна, требует много усилий, но решение ее поднимает эффектив­ность учебно-воспитательного процесса в высшей школе.

В заключение можно сказать, что методы контроля зависят от того:

1) какая обучающая процедура контролируется;

2) что контролируется — ход процедуры или ее результат;

3) какие задания для проверки хода и результатов обучающей процедуры используются;

4) какие ответы студентов используются при выполнении конт­рольных заданий;

5) какова частота и периодичность контроля.

Рис. 1. Структурно-функциональная схема критериальной оценки

По первому из указанных оснований выделяются методы конт­роля объяснения и уяснения содержания учебного материала, по второму — методы пооперационного контроля и контроля по резуль­тату, по третьему — контроль с помощью заданий на воспроизведе­ние знаний (пересказ содержания порции как письменно, так и устно), постановки вопросов по содержанию и предъявления задач, решаемых с применением знаний. По четвертому основанию методы контроля подразделяются на контроль с помощью конструируемых ответов. Наконец, по пятому основанию различаются систематичес­кий и эпизодический, частый и нечастый контроль, промежуточный и конечный (рубежный, итоговый). Итак, основная задача контроля объяснения и уяснения содержания материала — проверить уровень достигаемых целей.

2. Рейтинговая система оценки качества усвоения

учебного материала

Одним из ключевых требований деятельностного подхода в обучении студентов является четко выраженная направленность учебного процесса на развитие у обучающихся навыков логического мышления при принятии решений, связанных с характером пред­стоящей профессиональной деятельности. Реализация данной задачи в новых учебных программах требует совершенствования сущест­вующей системы контроля качества усвоения учебного материала. К прогрессивным методам контроля относится рейтинговый метод как способ оценки знаний, умений и навыков. Применение рейтинга является системой, организующей учебный процесс и активно влияющей на его эффективность.

Рейтинговая система контроля учитывает всю активную деятель­ность обучающихся, связанную с приобретением знаний, умений и других показателей, формирующих личностные качества студента, как-то: участие в научной работе на кафедре, написание реферата, участие в конкурсах научно-технического творчества, выступление с докладом на студенческой научной конференции и др.

Педагогическое тестирование как один из методов контроля усвоения обучаемыми знаний, умений и навыков обладает важными преимуществами перед традиционными методами контроля знаний. Вот некоторые из них:

1. Более высокая, чем в традиционных методах, объективность контроля. Обычно на оценку, получаемую студентами, влияют, помимо уровня его учебных достижений, многие другие факторы: личность преподавателя и самого студента, их взаимоотношения, строгость или, наоборот, либеральность преподавателя и т.п. В оценке, выставляемой на основе традиционных методов контроля, оказывается существенным субъективный компонент. Это подтверж­дается тем известным фактом, что за один и тот же ответ разные преподаватели могут поставить разные отметки. В тесте такое влияние субъективных факторов исключается. Если тест достаточно качественный, то получаемая оценка может рассматриваться как объективная.

2. Оценка, получаемая с помощью теста, более дифференциро­вана. В традиционных методах контроля пользуются четырех­балльной шкалой ("отлично", "хорошо", "удовлетворительно", " неудовлетворительно ").

Результаты тестирования, благодаря особой организации тестов, могут быть представлены, если необходимо, в более дифференциро­ванных шкалах, содержащих больше градаций оценки. При этом обеспечивается более высокая точность измерений учебных дости­жений.

3. Тестирование обладает заметно более высокой эффективностью, чем традиционные методы контроля. Тесты можно одновременно проводить на больших группах студентов. Обработка результатов для получения окончательных оценок проводится легче, быстрее, чем, скажем, проверка контрольных работ. Особенно велика эконо­мия времени, когда в форме тестирования проводятся экзамены.

Конечно, у тестирования как метода контроля есть и свои ограничения. Легче всего с помощью тестов проверять овладение просто организованным учебным материалом. Проверка глубинного понимания предмета, овладения стилем мышления, свойственным изучаемой дисциплине, с помощью тестов затруднена, хотя в принципе возможна. Отсутствие непосредственного контакта со студентом, с одной стороны, делает контроль более объективным, но, с другой стороны, повышает вероятность влияния на результат других случайных факторов. Например, невозможно проконтролиро­вать случайные ошибки студента, вызванные невниманием или неправильным пониманием задания. Существуют довольно изощрен­ные методы, позволяющие в значительной степени преодолеть эти недостатки.

Ограничения тестирования как метода контроля необходимо хорошо осознавать, чтобы правильно применять тесты. В ряде слу­чаев наилучший эффект дает сочетание тестов с традиционными методами контроля. Достоинство тестов заключается еще в том, что можно оценить степень вероятности влияния на результат случайных факторов и, следовательно, знать, насколько точен полученный результат.

Рейтинговая сумма баллов с учетом перечисленных выше активов формируется по результатам таких видов контроля, как:

1. Входной контроль — контроль знаний и умений студентов при начале обучения очередной дисциплине.

2. Текущий контроль — непрерывно осуществляемое "отслежива­ние" уровня усвоения знаний и умений студентами на лекциях, лабораторно-практических занятиях; своевременного и аккуратного оформления отчета о лабораторной работе и его защите; быстроты и точности решения ситуационных задач. По всем видам деятель­ности ведется учет баллов, принятый кафедрой, исходя из важности и трудности выполняемых работ.

3. Рубежный контроль — контроль умений и знаний студентов по окончании изучения темы (раздела), модуля. Этот вид контроля заключается в написании контрольной работы, расчетно-графическом задании или системе заданий в виде тестов.

4. Итоговый контроль — контроль знаний, умений, навыков и поддающихся критериально-оценочной процедуре личностных качеств. Итоговый контроль оформляется в виде зачетного или экзаменационного теста по всему предмету.

5.Отсроченный контроль — контроль остаточных знаний и умений спустя какое-то время после изучения темы, раздела, курса (этот срок может колебаться от 3 месяцев до полугода и более).

Поскольку рейтинг — это шкала достижений студентов, то совер­шенно очевидно, что должен быть стандартный инструмент измере­ния. Таким инструментом является правильно построенный и хорошо составленный тест, который соответствует не только предмету обучения, но и его задачам, является педагогическим тестом достижений. Обычно в тесте нет заданий, на которые можно найти прямой ответ в учебнике, поэтому возможность списывания практически исключена или бессмысленна.

Таким образом, рейтинг служит развитию и закреплению систем­ного подхода к изучению дисциплины. Это, пожалуй, наиболее важная положительная сторона рейтинга, кроме тех, что отмечены выше.

Обобщая достоинства рейтинговой системы как одного из инновационных методов, можно констатировать, что рейтинговая система — это не только оценка уровня усвоения знаний, но и метод системного подхода к изучению дисциплины. При рациональном, с дидактической позиции, разделении дисциплины на блоки возможно ее усвоение каждым обучающимся самостоятельно. В этом случае самостоятельная работа студентов, ее реализация в вузе, создает условия для развития личности студента. Самостоятельная деятельность по приобретению студентами знаний и умений предпо­лагает четкую регламентацию обучения в зависимости от содержания предмета, условий обучения, уровня подготовленности студентов к восприятию и усвоению материала.

3. Тестирование как психолого-педагогическое средство оценки академических способностей студентов

3.1. Ключевая информация

Внедрение тестового контроля следует начинать с обучения профессорско-преподавательского состава методике разработки заданий в тестовой форме. При этом самое главное — донести до сознания преподавателей, что тест это не просто привычная про­верка, испытание, пробы или оценка знаний с помощью тради­ционных вопросов и экзаменационных билетов, а система заданий в соответствующей форме.

Тестовые задания должны быть краткими, так чтобы на выпол­нение каждого не тратилось много времени. Далеко не всякое задание включается в тест. Оно должно быть строго определенным по форме, содержанию и специальным параметрам, оцениваемым в ходе математического анализа. Свойства заданий обусловливают свойства всего теста, поэтому говорят не просто о наборе, а о систе­ме заданий.

Тест — научно обоснованный метод измерения интересующих качеств и свойств личности. В зависимости от предмета измерения выделяются тесты педагогические, психологические, социологи­ческие, социально-психологические, культурологические и др.

3.2. Тестирование как элемент дидактического процесса

Процедура тестирования, начинается с того, что испытуемому дается инструкция, как работать с тестом. После этого выдаются тестовые задания. Они могут или читаться вслух перед группой испытуемых, или раздаваться испыту­емым в виде брошюры, или, при компьютерном тестировании, выдаваться на экран дисплея. Испытуемые дают ответы в соответст­вии с инструкцией — или на специальных бланках для ответов, или на дисплее компьютера.

Обработка ответов может проводиться разными способами, но самый распространенный заключается в следующем. За каждый правильный ответ на задание испытуемому присваивается один балл; если задание выполнено неправильно или ответ вообще не дан, то испытуемому ставится ноль баллов. После такой обработки у каждого испытуемого получается свой набор единиц и нулей. Суммирование всех единиц дает тестовый балл испытуемого. Иногда его называют индивидуальным баллом, чтобы подчеркнуть принадлежность конкретному испытуемому. В случае педагогического тестирования в нем выражается степень овладения учебным материалом.

Теперь возникает необходимость понять, что означает индиви­дуальный тестовый балл. Предположим, что в тесте из 50 заданий испытуемый правильно выполнил 30. Следовательно, его индиви­дуальный тестовый балл равен 30. Что означает этот результат? Хорошо это или плохо? Какой традиционной оценке ("отлично", "хорошо", "удовлетворительно", "неудовлетворительно") соответст­вует полученный результат? Чаще всего сразу ответить на эти вопросы не удается. Отсюда необходимым этапом при проведении теста является интерпретация результатов тестирования. Баллы, полученные путем сложения единиц, заработанных испытуемым за каждое выполненное задание, должны быть проинтерпретированы, чтобы приобрести значение, понятное и педагогу, и обучающемуся. Поэтому такие тестовые баллы иногда называют "сырыми", подчер­кивания, что требуется их дальнейшая обработка.

В настоящее время существуют два основных подхода к интер­претации тестовых баллов. Самая общая их характеристика заключа­ется в следующем. Нормативно-ориентировочный подход позволяет сравнивать учебные достижения отдельных студентов друг с другом. Критериально-ориентировочный подход позволяет оценивать, в какой степени студенты овладели необходимым учебным материалом. Для педагогического контроля более привычной и естественной кажется задача, решаемая критериально-ориентировочным подходом. Тем не менее в процессе контроля оба подхода важны и необходимы.

Значимость тестирования в структуре дидактического прогнози­рования представлена на рис. 6.2. Рассмотрим сформулированную проблему с трех узловых моментов, которые следует учитывать при разработке тестов.

Первый — определение педагогического теста; второй — определе­ние системы целей, отражающих совокупность знаний, умений и навыков, которыми должен овладеть обучаемый в процессе изучения материала; третий — практическое овладение формами тестовых заданий, в которых каждый педагог может выразить содержание учебной дисциплины. При этом каждой учебной дисциплине присуще свое собственное содержание, отличное от других, которое рассматривается как вариативное составляющее тестового задания. Рассмотрим эти три момента.

Рис. 2. Структура дидактического прогнозирования качества подготовки специалистов

1. По определению, педагогический тест представляет собой систему взаимосвязанных заданий специфической формы, определенного содержания, возрастающей сложности, позволяющих надежно и валидно оценить знания и другие интересующие педагога характерис­тики личности.

Раскроем это определение подробней. "Система взаимосвязанных заданий" означает, что в тесте собраны только такие задания, которые обладают системообразующими свойствами: а) общая принадлежность к одной и той же учебной дисциплине; б) взаимо­связь, выявленная корреляционными методами; в) взаимодополняе­мость и упорядоченность с точки зрения трудности.

Далее, по форме тестовые задания представляют собой не вопросы и не задачи, а задания, сформулированные в форме утверждений, которые в зависимости от ответов испытуемых могут превращаться в истинные или ложные высказывания (традиционные вопросы, напротив, истинными или ложными не бывают, а ответы на них бывают столь неопределенными и многословными, что для выявле­ния их истинности требуются большие затраты интеллектуальной энергии и преподавательского труда).

"Определенное содержание" предполагает включение в тест только такого контрольного материала, содержание которого находится в соответствии с содержанием учебного материала

Нарушение этого требования приводит к ухудшению качества теста, вплоть до того момента, когда могут возникнуть вопросы о цели теста и о том, что и как он измеряет.

"Возрастающая сложность" тестовых заданий позволяет 3 — 5% студентов тестируемой группы "заваливаться" на самых легких первых заданиях, другим — на последующих, студенты среднего уровня подготовленности могут ответить правильно только на половину тестовых заданий и, наконец, только 1—3% самых знаю­щих в состоянии дать правильный ответ на задания, расположенные в самом конце теста. Количество правильных ответов соответствует индивидуальному тестовому баллу испытуемых, который ассоции­руется с понятием "измерение уровня знаний" и проходит уточнения на основе той или иной модели измерения.

2. Цели тестового контроля можно разделить на несколько видов. Так, к целям первого вида относится формирование: знаний, понятий и системы понятий, терминов, законов и гипотез, научных фактов, моделей и методов. Цели второго вида формируют умения применять теоретические знания при решении задач и проведении эксперимента; третьего вида включают умения и навыки классифи­кации (сравнения, анализа, систематизации), их обобщения, опреде­ления новых понятий; четвертого вида характеризуют умения организовать эксперимент, выдвигать и проверять гипотезы, форми­ровать выводы, находить закономерности; пятого вида нацелены на воспитание дидактического подхода к явлениям, самостоятель­ности суждений, целенаправленности познавательной деятельности, т.е. на формирование профессионально-значимых качеств личности.

3. Наибольшее распространение в практике получили четыре основные формы тестовых заданий:

1. Закрытая форма тестовых заданий, характеризуемая тем, что к заданию предоставляются готовые ответы, один из которых правильный. Это ставит отвечающего в условия жестко алгоритмизи­рованного и вполне определенного ответа. Задания в закрытой форме могут быть альтернативными и неальтернативными. Альтернативные тестовые задания предполагают возможность всего одного варианта ответа: да или нет. Неальтернативные тестовые задания допускают выбор нескольких вариантов ответов из некоторой предложенной преподавателем схемы.

Возможность угадывания является главной причиной отрицатель­ного отношения педагогов к закрытой форме заданий. Для ликвида­ции этого "белого" пятна может быть использована формула коррек­ции тестовых баллов на догадку, суть которой состоит в том, что из полученной каждым студентом суммы баллов вычитается равно то число, которое может быть угадано в соответствии с положениями теории вероятностей. Указанная формула может быть использована в тесте с заданиями закрытого типа лишь в случае одинакового числа готовых ответов и имеет вид:

X_i¹  = R_i – W_i / (k – 1), 

где X_i¹  — скорректированный на догадку тестовый балл испыту­емого в тесте; R_i и W_i — число соответственно правильных и неправильных ответов, полученных испытуемым в тесте; k — число готовых ответов в заданиях теста.

Кроме того, основной недостаток заданий закрытой формы может быть исключен также с помощью фасетных (т.е. связанных общностью какого-либо признака) вопросов, позволяющих увеличить число заданий, классифицировав их по темам и уровню трудности. Большое искусство преподавателя в данном случае заключается в формировании "правдоподобных" ответов.

Основная цель заданий закрытой формы — быстро проверить ориентированность студента в данной учебной дисциплине по профориентированной работе для самопроверки. При этом используется выборочность ответа на поставленный вопрос. Например, арки и своды следует рассчитывать на: 1)прочность; 2) устойчивость, 3) прочность и устойчивость. Проектный расчет закрытых зубчатых передач выполняют по напряжениям: 1) контактным; 2) изгибным; 3) контактным и изгибным.

2. Открытая форма тестовых заданий, представляющая собой утверждение с неизвестной переменной и используемая для про­верки основных понятий, законов, фактов. Ответ заданной формы тестового задания определяется в виде одного (реже двух) ключевого термина, значение которого является обязательным.

 Открытая форма тестового задания не содержит подсказок, не "навязывает" вариантов ответов, позволяя их сформулировать в свободной форме. Открытые тестовые задания отличаются значительной неопределенностью в своих требованиях, структуре и содержании ответов.

Когда студент дает ответ на открытые тестовые задания, то он руководствуется только собственными представлениями о предмете вопроса. Следовательно, его ответ индивидуализирован и дает представление об уровне подготовки студента, либо умении находить ответ. Кроме получения преподавателем данных о структуре представлений студента по изучаемой проблеме, при использовании открытого тестового задания, появляется возможность узнать словарный запас, язык, развитие ассоциативных представлений, вербальные (речевые) навыки студента, связанные со способностью формулировать и аргументировать ответ.

При использовании закрытых тестовых заданий набор ответов принадлежит преподавателю. А это практически освобождает сту­дента от необходимости самостоятельного поиска возможного варианта ответа, т.е. фактически освобождают его от самостоя­тельной работы мысли. Закрытые тестовые задания помогают студенту ориентироваться в предмете и выражать свое отношение к проблеме через предложенный набор возможных ответов.

3. Задания "на соответствие", суть которых заключается в необходимости установить соответствие элементов одного множества элементам другого. Например:

4. Задания на «установление правильной последовательности», созданные для проверки правильного владения последовательностью действий, процессов, операций, суждений, вычислений. Эти задания используются, преимущественно, для оценки уровня профессиональной подготовки, а также для контроля знаний основных понятий и законов изучаемой учебной дисциплины. Например:

ЗАКОН ВСЕМИРНОГО ТЯГОТЕНИЯ

Все четыре формы приведенных выше тестовых заданий могут быть использованы для разработки тематических и ситуационных заданий, при этом должны быть выдержаны технологические и дидактические требования.

Технологические требования (критерии) к оценке качества тестовых заданий могут быть сформулированы в виде следующего алгоритма:

1) формулировка тестового задания должна содержать не более 7—9 слов;

2) формулировка тестового задания должна учитывать требуемый уровень усвоения;

3) сформулированные тестовые задания для определения основ­ных характеристик тестовых заданий должны экспериментально проверяться. При этом тестовые задания должны быть:

• валидны, т.е. должны отражать научное содержание учебной дисциплины;

• нацелены на определенный контингент студентов (в соответст­вии с требованиями квалификационной характеристики);

• надежны, т.е. устойчиво оценивать уровень одних и тех же студентов;

• дифференцированы (чувствительны), т.е. измерять конкрет­ные знания;

• дискриминантны (различительны) для данного контингента;

• пригодны для контроля знаний с помощью компьютерных технологий.

Дидактические требования к качеству тестовых заданий можно представить в виде следующих критериев:

• в тестовых заданиях должна быть ясно выражена одна мысль, которая записывается сжато, полно и четко;

• тестовое задание должно составлять важную, а не тривиальную часть пройденного учебного материала;

• по трудности оно должно быть приемлемо для тестируемого контингента студентов, а по содержанию — соответствовать крите­риям будущей профессиональной деятельности, либо потребностям будущего обучения;

• правильный ответ в тестовом задании не должен быть длиннее и точнее неправильных подсказок (дистракторов);

• в основе вопроса и правильного ответа не должны использо­ваться общие элементы;

• в тестовом задании не должны использоваться специфические слова-определители;

• семантическая осмысленность задания предполагает, что оно не должно формулироваться в отрицательной форме;

• тестовое задание не должно содержать двусмысленностей и тавтологий, противоречивых утверждений;

• профессиональным считается тест, реализованный с помощью фасетных тестовых заданий;

• качество тестового задания должно быть оценено по формаль­ной чистоте, согласно которой при создании теста необходимо стремиться к сочетанию принципов тестового задания, а не форм;

• студенты должны знать критерии выставления оценок.

В качестве примера приведем следующий критерий выставления оценки знаний:

K_оц = 2,5 + 10 (P / N – 0,7)

Причем 2,51 <  K_оц  < 3,49 соответствует оценке "удовлетворительно"; 3,51 < K_оц < 4,49 — оценке "хорошо" и 4,51 < K_оц — оценке "отлично". Здесь P — число правильных ответов обучаемого; N — число вопросов теста.

Рис. 3 Структура тестовых заданий

Статистическая оценка качества теста. После решения вопроса о правильности выделения объекта измерения (знания, способности, интересы, мотивы и т.п.) уместным является постановка вопроса о создании методики, пригодной для отображения объекта посредст­вом измерения. Предложенная методика проверки качества тестового контроля основана на двух концепциях:

1) надежности теста, в существенной мере связанной с идеей точности измерения;

2) адекватности используемого метода измерения поставленной цели, связанной с валидностью теста.

Надежность качества теста — это согласованность показателей, полученных у одних и тех же испытуемых при повторной проверке тем же тестом или эквивалентным ему (два теста считаются эквива­лентными, если для них выполняются постулаты 1 — 5 параллельных тестов, за исключением одного специфического признака эквива­лентности: истинные компоненты одного теста должны отличаться от истинных компонентов другого, параллельного теста на одну и ту же постоянную величину).

Наиболее простым способом определения надежности теста является, по меньшей мере, двукратное его использование в той же самой группе студентов. К недостаткам этого способа можно отнести неопределенность в выборе временного интервала между первым и вторым опросами.

При определении критерия надежности качества теста можно пользоваться таблицей 1.

Таблица 1.

Оценка надежности качества теста

Технология проектирования и разработки критериально-ориенти­рованных тестов. Алгоритм технологии проектирования и разработки критериально-ориентированных тестов может быть таким:

1. Формируется программа учебной дисциплины в учебных элементах.

2. На основании сформулированных целей обучения и соответст­вующего этим целям научного содержания проектируются тестовые задания.

3. Проводится эксперимент на соответствующем контингенте студентов.

4. Осуществляется дидактико-статистический анализ эксперимен­та, на основе которого "выбрасываются" те задания, на которые никто не ответил, либо ответили все.

5. Определяется коэффициент корреляции и осуществляется отбор заданий для проверки знания.

6. Для отладки теста определяются коэффициенты трудности и различения тестового задания

7. Строится матрица обработки тестовых результатов (после отбрасывания заданий, у которых все "1" или все "О").

Резюме

Рассмотренная сущность и значение тестового контроля заключается, во-первых, в том, что он позволяет препода­вателю получить информацию, как происходит овладение учебным материалом в процессе самостоятельного изучения его каждым студентом, насколько верны, прочны и гибки приобретенные студентами знания и умения, какие элементы учебного обеспечения и какие стороны взаимодействия преподавателя и студентов в учебном процессе недостаточно эффективны, какие коррекции следует внести в содержание и форму самостоятельной познавательной деятельности студентов

Во-вторых, контроль призван помочь обучающемуся критически оценить свои успехи и промахи в изучении данного материала, правильно организовать свою дальнейшую работу, обеспечить ее системность и систематичность, при этом контроль в форме самоконтроля играет важнейшую роль в деле воспитания таких качеств личности обучающегося, которые позволяют добиться планомерности, ответственности, дисциплинированности, сознатель­ности, инициативности и результативности в познавательной деятельности. Развитие и углубление различных форм самоуправления и самоконтроля, воспитание у обучающихся потребности в само­совершенствовании, самокритичном и ответственном отношении к выполнению порученного дела есть главный путь повышения эффек­тивности и результативности обучения.

Контрольные вопросы

1.       Что такое диагностирование обученности?

2.       На каких принципах основываются диагностирование, контроль и проверка знаний?

3.       Что вы знаете о новых поисках в области контроля и проверки знаний?

4.       Каковы задачи контроля качества знаний и умений студентов?

5.       Дайте определение категории "педагогическая оценка".

6.       Как вы поняли ранжировку качества обучения по уровням усвоения?

7.       Что значит "репродуктивное" и "творческое" решение задач?

8.       Как трактуются термины "обученность", "воспитанность"?

9.       Прокомментируйте содержание рис. 6.1.

10.  Раскройте суть формулы УД = ООД+ИД+КД.

11.  В чем суть рейтинговой системы контроля качества обучения?

12.  Назовите виды контроля знаний, входящие в рейтинговую систему.

13.  Раскройте суть педагогического термина "тест".

14.  Сделайте анализ содержания рис 2.

15.  Прокомментируйте цели тестового контроля.

16.  Каким требованиям должны отвечать тестовые задания?

Задание. Составьте тесты-задания для проверки одной из тем выбранной вами учебной дисциплины.

Используемая литература: Майоров А.Н. Теория и практика создания тестов для системы образования.- М., 2001; Челышкина М.Б. Теория и практика конструирования педагогических тестов.- М., 2002.