Составьте тестовые задания на установление соответствия. Как правильно создавать тестовые задания для учащихся. Принципы составления заданий

2. Задания на установление соответствия

В данном виде заданий необходимо установить правильное соответствие элементов одного множества элементам другого множества. Задания такой формы называют тестами соотнесения или тестами на классификацию.

Основные элементы композиции:

Инструкция для тестируемых,

Названия (заголовки) двух столбцов,

Элементы этих столбцов,

Строка ответов и оценка.

Существует достаточно много модификаций, от которых зависит вид инструкции. Наиболее часто используются инструкции вида: «соедините прямыми линиями соответствующие элементы правого и левого столбца»; «установите соответствие …», «запишите ответ в виде пар чисел».и далее текст задания: названия двух столбцов и составляющие их элементы.

Названия столбцов должны быть короткими и точными, понятными для всех испытуемых с первого чтения.

Элементы столбцов выражают содержание задания. Подбор этих элементов ограничен содержанием учебных программ. Важным требованием к этим заданиям является неодинаковое число элементов в левом и правом столбцах. Рекомендуется, чтобы в правом столбце было на несколько элементов больше, чем в левом. Это нужно для того, чтобы учащийся не смогли получить правильный ответ на последнюю, самую трудную для них пару ассоциируемых элементов автоматически.

Установите соответствие.

Соотнесите имена людей и их характеристики

Оценка за выполнение заданий может варьировать: в одном варианте один балл за правильное выполнение всего задания, в другом - по одному баллу за каждое правильно выполненное соответствие.

Задания на установление соответствия используются для проверки ассоциативных знаний, которые существуют в каждом предмете. Это знания взаимосвязи определений и фактов, авторов и их произведений, формы и содержания, сущности и явлений, связей между различными предметами, свойствами, законами, явлениями, формулами, датами.

Основная сфера применения данных заданий - текущий контроль знаний, реже используется при входном и выходном контроле из-за громоздкости.

3. Задания открытой формы применяют там, где нужно полностью исключить вероятность получения правильного ответа путем угадывания и тем самым повысить качество педагогического измерения. Такие задания используют для проверки усвоения на II уровне. С этой целью применяются тесты воспроизведения информации, решения типовых задач, разработки типовых заданий.

Особенность этих тестов - готовых ответов нет. Выполняя тест по воспроизведению информации, обучаемый вспоминает необходимые для ответа сведения. Эталон представляет собой образец полного и последовательного выполнения ответа.

Тесты-воспроизведения подразделяются по внешнему оформлению на тесты-подстановки и конструктивные тесты. Тестирование должно начинаться с коротких инструкций: «заполнить пропуски», «дополнить». При автоматизированном контроле нужный ответ набирается на клавиатуре компьютера.

Тестовое задание на подстановку может содержать разнообразную информацию: словесный текст, формулу (уравнение), чертеж (схему) или график, в которых пропущены составляющие существенную часть проверяемой информации слова, буквы, условные обозначения, линии или изображения элементов схем, деталей.

Существует количественный элемент подсказки (четыре уровня усвоения), который помогает обучаемому воспроизвести необходимую информацию. Элементы подсказки:

а) формальные, когда число точек (вместо прочерка) соответствует числу букв в пропущенном слове,

б) предметные, помогающие обучаемому назвать объект контроля по содержащимся в тексте признакам,

в) контекстные - содержание пропуска может выявляться из сопутствующего текста.

Задания конструктивных тестов требуют от учащегося самостоятельного составления (конструирования) ответа, заполнив пропуски в заданном тексте вариантами из предложенного списка: воспроизведения формулировки, написания формулы (уравнения), анализа изученного явления, выполнения чертежа, схемы и пр.

Задания могут быть представлены в виде фразы, текста, рисунка, схемы, графика, символов, таблиц и пр.

Пример: Предложенные задания можно выразить простой формулой –

«дата + место + событие »...

Попробуйте заняться несложной исторической математикой. .

1. 1037 + Киев = ...

2. 1097 + Любеч = ...

3. 1113 + Киево-Печерский монастырь = ...

4. 1238 + река Сить = ...

5. 1326 + (из Владимира в Москву) = ...

6. 1687 + Москва - ... =

Конструктивный ответ представляет обучаемому большую свободу в составлении ответа. При разработке конструктивного теста гораздо труднее (по сравнению с тестом-подстановкой) заставить обучаемого давать ответ так, чтобы его форма, последовательность и содержание оказались бы наиболее близкими к эталону, что усложняет процедуру проверки результатов контроля.

Учебного процесса; 4) Абсолютно неудовлетворительная объективность оценки знаний обучающихся, невозможность сопоставления оценок, полученных или разных обучающих или, тем более, в разных учебных заведениях . 1.8 Тестовый контроль знаний на уроках химии В последние годы в связи с проведением в стране эксперимента по внедрению единого государственного экзамена (ЕГЭ) тестовые задания все...

Становления и трансформации тестирования в отечественной истории образования и педагогической мысли. На основе анализа проблемы сформулирована тема исследования: «Генезис тестирования в истории отечественного образования». Актуальность, несоответствия, противоположности, противоречия, проблема и тема позволили сформулировать цель исследования: выявить, определить, обосновать предпосылки...

И взаимопонимания, достигать поставленных целей. В труде идет активный процесс становление тех практических умений и навыков, которые в будущем могут понадобиться для совершенствования профессиональных способностей. Глава 2. Разработка и апробация уроков по технологии с применением национально-регионального компонента в разделе «Ручная вышивка», 8 класс 2.1. Роль и место раздела «Ручная...

Позволяет педагогам более активно использовать их в обучении и воспитании. Практическая часть «Методика проведения контроля знаний, умений и навыков на уроках Мировой художественной культуры». 2.1 «Специфика контроля на уроках Мировой художественной культуры» При рассмотрении данного вопроса, я постараюсь дать оценку целесообразности использования определённых форм контрольных...

Методика составления теста

Составила преподаватель информатики

Власовец Надежда Витальевна

Введение (Актуальность программного обеспечения вида “Тесты”) 3

Теория создания тестов для системы образования 4

Правила составления тестовых заданий 8

Технология составления педагогического теста 9

Целеполагание на этапе планирования содержания теста 15

Состав требований к планируемым результатам обучения 16

Спецификация теста 18

Формы предтестовых заданий 19

Требования к предтестовым заданиям 20

Задания закрытой формы 20

Задания открытой формы (задания на дополнение) 21

Задания на установление соответствия 22

Задания на установление правильной последовательности 22

ЛИТЕРАТУРА: 25

Введение (Актуальность программного обеспечения вида “Тесты”)

Что такое тест ? Ответом на это могут быть строки: «Тест обученности – это совокупность заданий, сориентированных на выявление уровня усвоения определенных аспектов содержания обучения. Тест состоит из задания на деятельность данного уровня и эталона…». Отсюда следует, что объектом исследования в форме тестирования являются определенные аспекты содержания обучения.

Каким должен быть тест , и в том числе, тестирующая программа, - нельзя дать однозначного ответа. Все зависит от многих факторов. Что может сказать любой учитель, так это:

во-первых, какая цель поставлена перед обеими сторонами этого исследования (одной, тестирующей ‑ учителем и другой, тестируемой ‑ учащимся), то есть объект исследования , которым являются в нашем случае «определенные аспекты содержания обучения» информатике;

во-вторых, какими средствами и методами вооружен учитель.

Сегодня учитель должен следовать за развитием информационных технологий. Они диктуют новые формы и методы в педагогическом труде.

Зачем нужно тестирование на обычном уроке ? Первое – для экономии времени на проведение контроля знаний учителем. Так было до недавнего времени. Сегодня, учитывая возможности современной техники, используемой для этих целей, применение тестирования значительно расширяется. При однообразной работе понижается работоспособность учащихся. Тест же позволяет использование его на уроках разного типа - при контроле (и самоконтроле знаний), при закреплении полученных знаний, а также разной формы - при самостоятельной, групповой работе, при проведения фронтального опроса. Все чаще можно встретить использование тестирующих программ во внеклассной работе (турнир, игра). Процедура проведения тестирования знакома всем. Сценарии уроков могут быть разными в зависимости от поставленных учителем целей, от подготовленности испытуемых, и, конечно, от содержания самого теста (заданий). Результат тестирования зависит от многого: содержания теста, насколько правильно подобраны вопросы и ответы, от отведенного времени на тестирование, от того, правильно ли выбрано место урока при изучении темы и т.д. Добиться сбалансированности вопросов-ответов теста можно, хорошо зная предмет и особенности психики учащихся. Понятно, что учитель сможет добиться успехов в воспитании и обучении школьников, зная этапы возрастного развития детей и учитывая их личностные качества.

С точки зрения учителя информатики большое значение имеют технические средства обучения (ТСО), то есть инструмент тестирования, которыми может располагать учитель. Это может быть изготовленная учителем перфокарта – эталон с отверстиями в соответствующих правильным ответам позициях и подготовленные бланки для заполнения их учениками, - за неимением техники и она может как-то помочь учителю провести контроль знаний.

Сегодня в распоряжении учителя есть мощный компьютер с большим набором программ (в том числе на компакт-дисках). Сегодня, имея современный компьютер (допустим, типа Pentium II, с операционной системой Win95/98/2000), конечно же, никто не будет для экономии оперативной памяти, и тем более, памяти на винчестере, по старой привычке составлять программу на алгоритмическом языке, разве что в учебных целях при обучении программированию.

Если говорить с позиций пользователя Pentium , любое из приложений операционной системы Windows (Word/Excel/Access/PowerPoint), являясь мощным инструментом в руках подготовленного пользователя, позволяет быстрее и качественнее выполнить аналогичную работу на компьютере. Можно не перечислять достоинства новой техники и программного обеспечения. Учитель информатики, а вслед за ним и учителя других предметов не оставят без внимания появившиеся возможности прикладных программ для организации контроля знаний. При помощи интегрированного пакета программ (к примеру, MS Office) можно значительно быстрее создать свое программное тестирующее средство. Этим инструментом сможет воспользоваться учитель, не представляющий, что такое алгоритмический язык. К этой работе можно привлечь большее, чем ранее, количество учащихся. Пользователей компьютера всегда больше, чем программирующих учеников. В среде каждого из приложений, и в том числе Word, можно расширить возможности создаваемого документа (в нашем случае, тест-программы), применяя макрокоманды (макросы) и графические объекты; в среде Excel – применяя формулы при автоматизации вывода результата в виде оценки и дальнейшего анализа ответов в виде диаграмм; в среде Access, создав базу данных для групп и отчеты по данным тестирования; и, наконец, в среде PowerPoint ‑ готовя презентацию (чтобы и себя порадовать, и администрацию удивить). Импорт данных из одного приложения в другое – большой “плюс” в пользу этого средства. Эстетическое удовольствие при создании привлекательного программного продукта, как и при ответах на вопросы тест-программы с красивым интерфейсом – одна из составляющих успешного педагогического труда.

Вопрос о том, умеют ли ученики работать с тест-программой, становится особенно актуальным. Наверное, многие согласятся, что при прохождении Телетестинга в наилучших условиях оказываются те, кто имеет не только лучшие знания по предмету, но и навыки такого тестирования.

Каждый учитель заинтересован не только в хороших результатах своих учеников. Использование тестирующих программ крайне актуально.

Я решаю проблему тестов по предмету «Прикладная информатика авторской разработкой Иванцова А. С., выполненной в Microsoft Access. Тест содержит систему вопросов по основным разделам предмета, изучаемых в курсе информатики.

Каждая из программ, являясь тестом обученности по предмету, в то же время позволяет использование ее на уроках

разного типа :

при закреплении изучаемого материала (тест-тренинг),

при контроле знаний (тест-контроль) и

разной формы :

при обучении в сотрудничестве (работе парами),

при индивидуальной работе (подготовке к контрольной работе, зачету).

Возможности программы:

Порядок ответов на каждый вопрос меняется случайным образом;

Выбор блока вопросов из предложенного количества при помощи задания номера первого вопроса и количества вопросов;

Установка предельной нормы расхода времени на ответы;

Установка, по желанию, режима смены порядка вопросов теста;

Установка режима «жесткости» контроля (одного из четырех или своего);

Вывод, по желанию, списка правильных ответов (в текущем сеансе);

Сопровождение коротким сигналом неправильного ответа (по желанию).

Результат работы программы – вывод десятибалльной оценки знаний, количества правильных ответов, общего числа ответов, затраченного времени и количества запусков теста.

Теория создания тестов для системы образования

Тесты как измерительный инструмент используются в большинстве стран мира. Их разработка и использование основано на мощной теории и подтверждено многочисленными исследованиями. Тестология как теория и практика тестирования существует более 120 лет, и за это время накоплен громадный опыт использования тестов в различных сферах человеческой деятельности, включая образование.

Тесты - одно из средств проверки и оценки результатов обучения школьников. В последнее время они получают все большее применение в практике обучения.

Тест (от английского test - испытание, проверка) - стандартизированные, краткие, ограниченные во времени испытания, предназначенные для установления количественных и качественных индивидуальных различий.

Требования, предъявляемые к тестам: надежность, валидность, репрезентативность. Факторы, определяющие надежность теста:

правильный выбор параметров, адекватно отражающих обученность;

технологичность (четкость, ясность) инструментария проверки и оценки - четкая инструкция об организации проверки, однозначность оценки;

одинаковость условий каждого тестирования;

однородность (равнозначность) измерителя.

Валидность - аспект надежности. Валидность в психологии и дидактике - это соответствие содержания теста результатам обучения, которые зафиксированы в программе. А содержание проверочных заданий должно соответствовать целям контроля. Валидность проверяется на основе сравнения результатов использования разработанного теста с результатами проверки уровня обученности протестированных школьников другими методами (устный опрос, традиционная контрольная работа), сопоставление этих результатов с текущей успеваемостью учащихся. Важнейшим здесь является полнота охвата заданиями проверяемого учебного материала, как говорят в дидактике, репрезентативность (представительность) проверочных заданий. Если речь идет об итоговой проверочной работе, то ею охватывается весь курс, важнейшие его темы, наиболее значимый в них материал.

Затрагивая вопросы методики использования тестов для контроля результатов обучения школьников необходимо вспомнить об основных функциях проверки и оценки результатов обучения. Выделим среди них:

учетно-контрольную (информационную), которая систематически позволяет учителю фиксировать результаты обучения и судить об успеваемости каждого ученика, его достижениях и недочетах в учебной работе;

контрольно-корректирующую (диагностическую), которая обеспечивает связь "учитель-ученик", для внесения коррективов в методику обучения, перераспределения учебного времени между различными вопросами темы и пр., позволяет осуществлять диагностику причин отставания школьников;

обучающую , которая в результате помогает повторить материал, акцентировать внимание учащихся на главных вопросах и важнейших мировоззренческих идеях курса, указывает на типичные ошибки, что способствует закреплению и углублению знаний учащихся;

воспитательную (мотивационную), которая стимулирует учащихся к дальнейшей учебной работе, углублению своих знаний, развивает у школьников умения самоконтроля и самооценки;

аттестационную , которая связана с характеристикой уровня обученности школьника, является основой его аттестации, а также важнейшим компонентом аттестации работы учителя образовательного учреждения.

Какие же положительные стороны мы можем отвести тестированию?

Во-первых, тесты оказываются значительно более качественным и объективным способом оценивания, так как стандартизирована процедура их проведения (на всех этапах проведения тестирования невозможно внести субъективную составляющую в оценку, она не зависит от настроения преподавателя, его отношения к конкретному учащемуся, впечатления от ответов на предыдущие вопросы). По данным английской организации NEAB, занимающейся итоговой аттестацией учащихся Великобритании, тестирование позволяет снизить количество аппеляций более чем в три раза, сделать процедуру оценивания одинаковой для всех учащихся вне зависимости от места проживания, типа и вида образовательного учреждения, в котором занимаются учащиеся.

Во-вторых , тесты - более емкий инструмент - показатели тестов ориентированы на измерение степени, определение уровня усвоения ключевых понятий, тем и разделов учебной программы, умений, навыков, а не на констатацию наличия у учащихся определенной совокупности усвоенных знаний. Стандартизированная форма оценки, используемая в тестах достижений, позволяет соотнести уровень достижений учащегося по предмету в целом и по отдельным его разделам со средним уровнем достижений учащихся в классе и уровнями достижений каждого из них. Кроме того, выполняя итоговую тестовую работу, каждый ученик использует знания по всем темам, изучение которых предусматривала программа. На устный экзамен обычно выносится 2-4 темы, на письменный несколько больше.

В-третьих , это более мягкий инструмент. Тестирование ставит всех учащихся в равные условия, используя единую процедуру и единые критерии оценки, что приводит к снижению предэкзаменационных нервных напряжений.

В-четвертых , с точки зрения интервала оценивания тест - широкий инструмент. Если провести аналогию с прыжками в высоту, то традиционная контрольная работа представит собой палочку, на которой нанесены метки: 2, 3, 4, 5. В случае выполнения учеником всех заданий он получает отметку отлично. При этом совершенно не ясно, перепрыгнул он нашу палочку с запасом в два раза или пролетел прямо над ней. То же можно сказать и про нижнюю отметку.

Означает ли тот факт, что если ученик не выполнил ни одного задания, то он ничего не знает? Скорее всего нет. А означает ли, что ученики, выполнившие верно все задания контрольной работы имеют одинаковый уровень подготовки - вероятно, что тоже нет. Можно видеть, что тестирование предоставляет возможность расширить шкалу оценивания как вверх, так и вниз. Тестирование приходит в противоречие с учительским стереотипом о том, что отличную оценку нужно выставлять только в том случае, если все задания выполнены правильно.

В-пятых , необходимо отметить гуманизм тестирования, который заключается в том, что всем предоставляются равные возможности, широта теста дает возможность ученику показать свои достижения на широком поле материала. Таким образом, ученик получает некоторое право на ошибку, которого он при традиционном способе оценивания не имеет.

Кроме того, тесты эффективны с экономической точки зрения: основные затраты приходятся на составление качественного инструментария, т.е. носят разовый характер. При увеличении количества аттестуемых, эти затраты в значительной степени окупаются.

Классификация тестов

1. По процедуре создания:

· стандартизованные (в образовании, для целей итоговой аттестации);
· не стандартизованные.

2. По средствам предъявления:

· бланковые;
· предметные (манипулируем материальными объектами);
· аппаратурные (используются устройства для изучения особенностей внимания, восприятия, памяти, мышления);
· практические (лабораторные работы, снабженные соответствующими инструкциями и имеющие тестовое оснащение);
· компьютерные.

В рамках компьютерного тестирования В.С. Аванесов предлагает адаптивные тесты - задания, в которых предъявляются по одному, в зависимости от ответа испытуемого на предыдущий вопрос.

Какие же положительные моменты можно отметить в компьютерном тестировании?

Во-первых, тесты привлекают своей оперативностью: можно быстро проверить и оценить уровень усвоения учебного материала.

Во-вторых , повышается объективность проверки и оценки знаний и умений обучаемых.

В-третьих, тесты являются наиболее перспективными измерителями уровня обученности школьников в условиях введения в практику школы образовательных стандартов.

Компьютерные тесты имеют и свои недостатки - провоцируют случайные ошибки, не оставляют исходных результатов на случай апелляции.

3. По направленности:

· тесты интеллекта;
· личностные тесты;
· тесты достижений.

4. По характеру действий:

· вербальные (с использованием умственных действий);
· невербальные (связанные с практическим манипулированием предметов).

5. По ведущей ориентации:

· тесты скорости (содержат простые задачи; время решения ограничено);
· тесты мощности или результативности (содержат трудные задачи, время решения не ограничено, или мягко лимитировано);
· смешанные тесты (задачи различного уровня сложности, от самых простых до самых сложных, время испытания ограничено, но достаточно для решения большинства задач).
Эти тесты наиболее часто применяются на практике, к ним относятся большинство тестов школьных достижений.

6. По степени однородности задач:

· гомогенные (задачи, сходные по характеру, но различающиеся конкретным содержанием);
· гетерогенные (задания отличаются и по характеру, и по содержанию).

7. По объективности оценивания:

· объективные (в процессе обработки результатов тестирования не предусматривается использование субъективных толкований тестирующим);
· проективные тесты (допускается чрезвычайно большое разнообразие ответов и проявление определенной субъективности при их толковании тестирующим.

8. По специализации:

· широкоориентированные (для тестов в системе образовании), позволяющие оценить эффективность процесса обучения, степень освоения учащимися системы знаний, умений и навыков в ходе учебного процесса;
· узкоориентированные, направленные на выявление достижений учащихся в процессе освоения отдельных предметов, отдельных тем и т.д.

9. По целям использования (только для тестов в системе образования):

· предварительный определяющий тест (определяет знания в начале обучения, затрагивает минимум знаний по теме обучения);
· тест прогресса, достигнутого в процессе обучения, формирующий тест (затрагивает ограниченный сегмент обучения, раздел или главу, состоит из серии отдельных тестовых вопросов, всесторонне охватывающих ограниченную область обучения). Пример, обучающие тесты. Ученику даются конкретные инструкции для исправления обнаруженных ошибок;
· диагностический тест (содержит большое число вопросов, имеющих отношение к конкретной тестируемой области). Цель теста - определение трудностей обучения.
· суммирующий тест (используется для оценки широкого диапазона результатов обучения, ожидаемого в конце учебного процесса, содержит вопросы, представляющие более высокий уровень сложности, чем другие виды тестов).

10. По широте использования (только для тестов в системе образования):

· для использования учителем;
· для использования группой учителей или администрацией образовательного учреждения;
· для целей отбора и формирования групп;
· для аттестации учащихся.

11. По форме:

· тесты закрытого типа (задания с выбором верного ответа (или нескольких верных) из набора предлагаемых;
· тесты открытого типа (ввод предполагаемого ответа на задание самим тестируемым).

Правила составления тестовых заданий

Начинайте формулировать вопрос с правильного ответа.

Вопрос должен содержать одну законченную мысль.

При составлении вопросов следует особенно внимательно использовать слова "иногда", "часто", "всегда", "все", "никогда".

Вопрос должен быть четко сформулирован, избегая слова большой, небольшой, малый, много, мало, меньше, больше и т.д.

Избегайте вводных фраз и предложений, имеющих мало связи с основной мыслью, не следует прибегать к пространным утверждениям, так как они приводят к правильному ответу, даже если учащийся его не знает.

Неправильные ответы должны быть разумны, умело подобраны, не должно быть явных неточностей, подсказок.

Не задавайте вопросы с подвохом (в заблуждение могут быть введены наиболее способные учащиеся).

Все варианты ответов должны быть грамматически согласованы с основной частью задания, используйте короткие, простые предложения, без зависимых или независимых оборотов.

Реже используйте отрицание в основной части, избегайте двойных отрицаний, таких как: "Почему нельзя не делать…?"

Ответ на поставленный вопрос не должен зависеть от предыдущих ответов.

Правильные и неправильные ответы должны быть однозначны по содержанию, структуре и общему количеству слов. Применяйте правдоподобные ошибочные варианты, взятые из опыта.

Если ставится вопрос количественного характера, ответы располагайте по возрастанию, если дистракторы представлены в виде слов текста, располагайте их в алфавитном порядке.

Лучше не использовать варианты ответов "ни один из перечисленных" и "все перечисленные".

Избегайте повторения.

Используйте ограничения в самом вопросе.

Не упрощайте вопросы.

Место правильного ответа должно быть определено так, чтобы оно не повторялось от вопроса к вопросу, не было закономерностей, а давалось в случайном порядке.

Лучше использовать длинный вопрос и короткий ответ.

Проанализируйте задания с точки зрения неверного ответа наиболее подготовленных учеников.

Технология составления педагогического теста

Являясь частью многих педагогических новаций, тесты позволяют получить объективные оценки уровня знаний, умений, навыков, проверить соответствие требований к подготовке выпускников заданным уровневым стандартам знаний, выявить пробелы в подготовке учащихся. В сочетании с персональными ЭВМ и программно-педагогическими средствами тесты помогают перейти к созданию современных систем адаптивного обучения и адаптивного контроля наиболее эффективных, но, к сожалению, наименее применяемых форм организации учебного процесса.

Широкие возможности современных тестов в решении ряда важных для образования и общественной жизни задач почти не задействованы, а там, где их пытаются задействовать, делается это неудовлетворительно, без опоры на имеющиеся в мировой науке достижения, самостоятельно. Отчасти это происходит из-за слабой информированности преподавательского состава по вопросам теории и методики тестового контроля, отсутствия требуемой литературы, а также из-за очень распространенных представлений о кажущейся легкости создания теста.

1. Общие методики составления педагогического теста .

В повседневной практике каждого человека измерение ~ вполне обычная процедура. Измерение так же, как счет, вычисление, стало неотъемлемой частью производства и распределения. Но измерения по отношения к человеку всегда были актуальны и связаны с введением определенных правил, на основании которых испытуемым приписываются некоторых числа. Оперируя ими, можно получить новые сведения об объектах измерения, а всесторонний анализ факторов, влияющих на обучение студентов вузов и учащихся, с применением статистико-математических методов позволяет точно измерить интересующие нас показатели, сравнить их между собой, установить между ними связи и взаимозависимости.

Методика измерения профессиональных знаний, умений человека дело не простое. При отсутствии измерений оценка традиционно строится на интуиции, на анализе документов (дипломов, характеристик и т.п.), результатах "испытательного срока", контрольных работ, рефератов и т.п.

При создании хорошо управляемых технологий обучения необходимо создать систему педагогических тестов, позволяющих объективно оценивать различные стороны процесса обучения, его результаты.

Понятии "тест" (от английского test - испытание, проба, исследование).

Одни авторы считают, что тест - краткое стандартизированное испытание, предназначенное для распознавания интересующих нас особенностей и качеств личности. Другие авторы отмечают, что в понятие "тест" необходимо включить и получение с помощью его объективных количественных оценок результатов обучения. В этих работах подчеркивается то, что тест является научно обоснованным методом эмпирического исследования в педагогике.

Следовательно, тест - краткое стандартизированное испытание, предназначенное не только для получения объективной количественной оценки результатов обучения, но и распознавания интересующих особенностей и качеств личности.

Более общее определение дается в работе . Тест - "стандартизированные задания, по результатам выполнения которых судят о психофизиологических и личностных характеристиках, а также знаниях, умениях и навыках испытуемого" .

Можно дать более лаконичное определение теста. "Тест - краткое стандартизированное испытание, допускающее количественную оценку результатов на основе их статистической обработки" . Рассмотрим подробнее данное определение.

Во-первых, под "испытанием" подразумевается система заданий, на основании анализа результатов выполнения которой предстоит провести количественную оценку измеряемым качествам и свойствам.

Отбор и структура заданий теста зависит от того, какие показатели и факторы интересуют исследователя данной группы лиц. Каждое из заданий теста по своей сути представляет для испытуемого вопрос, проблему. Ответ на вопрос - это всегда устранение некоторых сомнений, колебаний, неопределенности в рассматриваемой ситуации с целью получения новых, более точных знаний.

Каждое из заданий теста содержит описание некоторой "ситуации", взятой из природы, производства, педагогической деятельности и т.п. Это описание может быть представлено на различных "языках": вербальном, языке символов, графиков, рисунков и т.п. Любое описание всегда приблизительно, неполно, и поэтому перед испытуемым ставится "требование" сделать его ситуации более точными, полными, используя с этой целью "информацию к решению", содержащуюся в описании ситуации, тексте задания, а также привлекая "внешнюю по отношению к заданию информацию" ≈ известные испытуемому научные факты, закономерности и т.п. В процессе выполнения задания ему приходится перемоделировать ситуацию путем введения ряда упрощающих решение допущений, абстракций, переходя в описании от одного языка к другому.

Среди заданий теста следует различать:

Задания информативного характера;

Задания, решение которых может быть осуществлено алгоритмическим, формализованным путем;

Проблемы, для решения которых необходим эвристический и нестандартизированный поиск. Понятно, что подобное деление заданий носит условный характер.

В зависимости от полноты информации к решению, содержащейся в тексте, задания могут быть сформулированными и только поставленные. Сформулированные задания содержат оптимальную информацию к их выполнению, поставленные ≈ не требуют от испытуемого самостоятельно сформулировать задачу, оговорить условия, при которых рассматривается задание. Кстати, информация, содержащаяся в тексте задания ("исходные данные"), может быть представлена в явном виде или же в скрытой форме, требующей для ее извлечения выполнения более или менее сложных операций, что повышает сложность задания.

Во-вторых, тест - "стандартизированное испытание", т.е. испытание, при котором все выполняющие задания находятся в одинаковых, строго оговоренных условиях. Только это позволяет сравнивать результаты тестирования, доводить результаты измерения до числа.

В-третьих, тест позволяет получить "количественную оценку" результатов тестирования. Поскольку предстоит измерить непрерывно изменяющиеся, не дискретные величины, то для доведения результатов измерений до числа используются специальные шкалы. В нашем случае шкала ≈ это определённая последовательность числовых значений результатов измерительных операций, применяемых к эмпирической системе.

Чем же отличается тест от педагогического теста? В работах, перечисленных выше, мы не встретим однозначного определения педагогического теста. Только в работе Аване-сова B.C. дается его определение. Педагогический тест - это "совокупность взаимосвязанных заданий возрастающей сложности, позволяющих надежно и валидно оценить знания и другие интересующие педагога характеристики личности". Очень существенно, что в определении основной упор делается на систему взаимосвязанных заданий возрастающей сложности.

В последней работе этого же автора определение педагогического теста дается уже через систему фасетных заданий специфической формы, определенного содержания и возрастающей трудности. Автор отмечает, что педагогический тест позволяет качественно оценить структуру и эффективно измерить уровень знаний, умений, навыков и представлений по учебной дисциплине.

Мы не совсем согласны с данным автором в том, что педагогический тест - это система только фасетных заданий, так как его можно составить, как показывает эксперимент, не используя фасет (варьирование содержания в пределах укрупненной единицы знания).

Условимся под педагогическим тестом понимать систему определенным образом расположенных заданий, позволяющих выявить структуру знаний, умений и измерить их .

Результаты измерения заданий испытуемыми содержат самую разнообразную информацию в скрытой форме. Есть только один путь ее извлечения - сопоставление результатов выполнения достаточно большого числа заданий (необходимо "набрать статистику"). Только это позволяет получить выводы, заслуживающие доверия.

Педагогические тесты весьма разнообразны. С точки зрения целей применения, можно выделить:

- тесты достижения;

- критериально-ориентированные тесты, позволяющие сопоставить уровень индивидуальных учебных достижений с полным объемом знаний, умений и навыков;

- нормативно-ориентированные тесты, сравнивающие испытуемых друг с другом по уровням и учебным достижениям;

- аттестационные тесты, определяющие степень обученности;

- тесты прогнозирования результатов обучения.

Тесты могут использоваться для всесторонней оценки состояния испытуемых, например, до начала процесса их интеллектуального развития, способностей к конкретному учебному предмету, установления уровня обучаемости, уровня достижений в рассматриваемой области знаний.

В последнее время все большее признание в нашей стране получает новый вид тестов - критериально-ориентированные ("criterion-referenced test"), хотя в странах с высокой тестовой культурой они появились в шестидесятых годах.

Как и любой педагогический тест, критериально-ориентированный тест представляет собой систему заданий, позволяющую измерить уровень учебных достижений. Но главная их особенность состоит в том, что критериально-ориентированные тесты сопоставляют уровень индивидуальных учебных достижений с полным объемом знаний, умений и навыков, которые должны быть усвоены студентами или учащимися.

Обычно критериально-ориентированные тесты используются для разделения учащихся на несколько групп по уровню их знаний. В самом простом случае это две группы - усвоившие и не усвоившие необходимый материал. В тесте образовательный стандарт выступает в виде критериального балла - минимального тестового балла, который должен получить студент, чтобы считаться усвоившим тот или иной материал. Для установления критериального балла используются экспертные методы анализа заданий.

Критериально-ориентированные тесты разрешают проблему соотношения тестовых баллов с традиционными педагогическими оценками. Устанавливаются такие критериальные баллы, которые делят испытуемых на группы, соответствующие оценкам "отлично", "хорошо", "удовлетворительно", "неудовлетворительно". Такая организация теста позволяет проводить в тестовой форме экзамены.

Критериально-ориентированные тесты помогают разрешить определенные задачи:

- сопоставление с требуемым стандартом образования достижений отдельных студентов, учебных групп;

- оценка доли учебного материала, усвоенной испытуемыми;

- выбор определенной технологии обучения;

- отбор испытуемых, достигших необходимого уровня квалификации.

В отличие от критериально-ориентированных, тесты достижений, как показывают проведенные нами исследования, являются надежным средством для быстрого и эффективного выявления уровня профессиональной подготовки студента и уровней обученности учащихся.

Тесты профессиональных достижений специфичны, предназначаются для конкретных профессий, и поэтому область их применения ограничена. Для нашего случая можно выделить две группы тестов профессиональных достижений:

- первая группа требует от испытуемого выполниения контрольных заданий, моделирующих профессиональную деятельность, на практически-семинарских занятия;

- вторая группа представляет собой набор заданий, выполняемых учащимися на практике.

Студенты, в зависимости от условий предъявления заданий, могут отвечать на них письменно или устно. Преподаватель в отдельных случаях может проводить опрос в форме интервью и беседы. Все эти методы характеризуются одним ведущим признаком: с их помощью получают ту информацию, которая заложена в словесных сообщениях опрашиваемых.

При беседе и интервью задания обсуждаются в очередности, которая предусмотрена конструкцией педагогического теста.

Методику разработки тестов достижений можно разбить на несколько исследовательских этапов:

- подбор типичных ситуаций, которые возникают в профессиональной деятельности учителя, "с одной стороны, они должны быть синтезированы и объединены вокруг определенной практической проблемы, имеющей многосторонний и целостный характер, а с другой ≈ они должны быть переведены на язык практических действий, практических ситуаций" ;

- разработка методов перевода ситуаций на язык педагогических задач;

- разработка различных вариантов решения педагогических задач;

- определение ценности (веса) различных решений по каждой конкретной педагогической задаче;

- установление правильной последовательности предъявления системы заданий, составляющих тест достижений;

- экспериментальная проверка составленного теста.

Анализ профессиографических данных и дополнительных сведений об учебных программах, методах, формах, средствах обучения показал, что для разработки тестов достижений этого недостаточно, нужно еще и наличие специальной системы профессиональных знаний и умений.

В первоначальном варианте тест достижений имеет избыточное число заданий, часть которых после первой экспериментальной проверки убирается. О необходимости иметь избыток заданий в предварительном варианте говорят все исследователи, занимающиеся вопросами создания тестовых методов. Для каждого задания устанавливается свой эталон ответа.

При подготовке тестов достижений применяется экспертная оценка знаний и умений, осуществляемая параллельно с тестированием. Сначала испытуемые выполняют тест, и после этого их опрашивает группа экспертов. Баллы по тестам сопоставляют с оценками. Процент совпадений должен быть высок ≈ 85-90%, это является гарантией того, что в тест включен основной материал по предмету, как его выявили эксперты.

В зависимости от характера деятельности испытуемого при выполнении педагогического теста различают:

- тесты со свободно конструируемыми ответами;

- тесты на дополнение ответов, приведенных в заданиях;

- тесты выбора верных ответов из общего числа предложенных в задании (альтернативные тесты);

- комбинированные тесты.

Для оценки дидактических возможностей перечисленных тестов необходимо остановиться на характерных особенностях теста вообще и отдельных видов, в частности.

Каждое из заданий теста, как уже упоминалось ранее, содержит информацию к решению. Характер и объем ее может варьироваться как дидактическая помощь испытуемому. Её избыток может играть положительную роль в тестах, используемых в режиме обучения и даже диагностики, но оказаться нежелательным в тестах для оценки достижений, где основной функцией теста является контроль.

Следующая особенность теста - он может ограничивать испытуемых в их действиях, поисках решения. Как и в предыдущем случае, оценка этой особенности теста не однозначна. Все зависит от целей тестирования. Так, нередко одно и то же задание теста может быть выполнено на основе различных идей, методов решения. Пытаясь оценить, насколько испытуемые овладели некоторым конкретным методом, следует исключить возможность решения другими.

Из всех видов тесты выбора имеют преимущество в предоставлении испытуемым свободы в ответах на задания, как это бывает при самостоятельном конструировании ответов. Это достигается путем включения в число ответов к заданиям альтернативного варианта - ответ иной", подразумевая ответ, отличный от всех остальных, приведенных к заданию.

Еще одна особенность тестов заключается в том, что конкретные формулировки заданий могут навязывать испытуемому вполне определенный порядок действий при их выполнении и логику поиска решения. Хорошо это или плохо - оценить однозначно невозможно. Все зависит от целей тестирования. Например, если основными целями применения теста является обучение, то рассматриваемая особенность тестов дает возможность формировать у испытуемых определенные методы рассуждений.

От вида теста самым существенным образом зависит, насколько проста и технологична обработка результатов тестирования. В этом смысле вне конкуренции тесты выбора. Тогда как при свободном конструировании ответов испытуемыми оказывается исключительно сложно обрабатывать результаты тестирования.

Заканчивая рассмотрение видов теста, следует упомянуть о так называемых ситуационных тестах, в которых все задания относятся к описанию одной и той же ситуации. К ситуационным тестам относятся тесты в форме программ решения задач и алгоритмов определенного типа. В них последовательность заданий диктуется логикой решения рассматриваемых задачных ситуаций. Результаты выполнения одних заданий могут быть использованы при выполнении последующих.

Как было отмечено выше, наиболее широкое распространение в педагогическом тестировании получили тесты выбора. Сравнивая их с другими видами педагогических тестов, следует отметить простоту обработки результатов их выполнения, что в рамках массового обучения имеет особую ценность. Перечислим ряд других ценнейших дидактических качеств тестов выбора.

1. Приводимые наборы ответов к заданиям теста:

а) средство доведения до испытуемых новой для них учебной информации;

б) средство показа различных мнений по одному и тому же вопросу;

в) показ различных идей, принципов, на основе которых может решаться рассматриваемая проблема.

2. Наборы ответов к заданиям - это средство диагностики, поскольку появляется возможность в число альтернативных ответов включать конкретные ошибки, что позволяет установить причины их возникновения.

3. Появляется возможность обеспечить "обратную связь" в обучении, как и для испытуемого, а отсюда и возможность для внесения коррективов в обучение.

4. Работа с тестом выбора является эффективным средством развития мышления испытуемых, поскольку она по своей сути складывается из операций сравнения, поиска альтернатив.

Встречающееся мнение о том, что ознакомление испытуемых с ложными ответами нежелательно, что эти ошибки могут закрепиться в их памяти, несостоятельно. Наоборот, работа с такими ответами позволяет вскрыть ошибочные мнения и их разрушить.

Ответы к заданиям теста могут находиться в различных отношениях друг к другу:

- противопоставления, противоположности, когда выбор одного из них в качестве верного является утверждением ошибочности всех остальных;

- равноправия, когда верными могут оказаться несколько из предложенных ответов;

- дополнения друг друга, когда только несколько отобранных ответов в сумме дают законченный ответ на поставленный в задании вопрос.

Процесс составления педагогических тестов является делом исключительно ответственным и трудоемким. Поскольку они являются основой контроля, диагностики в управлении процессом обучения, то становятся понятными исключительно высокие требования к содержанию и форме тестов. Если сказать в самом общем виде, то тест должен быть пригодным (валидным) с точки зрения поставленных перед ним целей измерения. Понятие валидности (перевод слова с английского valid - годный, пригодный) трактуется довольно широко.

В теории тестирования различают два типа валидности: внешнюю и внутреннюю. Внешняя валидность присуща тестам, не имеющим сходных компонентов с оцениваемой системой. Внутренняя валидность свойственна тем тестам, которые содержат в себе компоненты оцениваемой педагогической системы.

Мера валидности теста определяется несколькими способами, например, сравнением с тестом-эталоном и сопоставлением с более объективными показателями, полученными другими методами.

Сопоставление с объективными показателями предусматривает сравнение достижений испытуемого в тесте с результатами, полученными с помощью экспертов. В этом случае обычно берутся оценки, выставляемые испытуемому преподавателями-экспертами традиционным образом, без использования тестов, после чего результаты по заданиям теста и по оценкам экспертов коррелируются. Если получены однотипные изменения общих результатов, то считается, что тест обладает валидностью. Мера согласованности указывает на меру валидности. Следует заметить, что тест нельзя назвать валидным или невалидным без указания сферы его применения.

Тест считается содержательно валидным, если аспекты измерения соответствуют целям тестирования (аспектная полнота теста). При этом основное внимание в тесте (наибольшее число заданий) уделено наиболее важным из аспектов измерения (тест сбалансирован). Наконец, последовательность, в которой расположены задания и ответы к ним, логически обоснованы, такой тест представляет собой единое целое (конструктивно целостный). В педагогических тестах, разрабатываемых для контроля, диагностики знаний, валидность по содержанию играет решающую роль.

Выбор критериев, по которым предстоит оценивать результаты работы испытуемых с тестом, должен быть безупречен (критериальная валидность), гарантируя надежность, объективность, обеспечивая нужную точность измерения, давая возможность разделить испытуемых (дифференцирующие возможности теста).

Считается, что к тестовым заданиям относятся те, которые отвечают одновременно трем требованиям - корректности содержания, форме и наличию системообразующих свойств. Первому требованию отвечают задачи, вопросы, и потому этот признак необходим, но не достаточен.

Тестовые задания представляют собой не вопросы и не задачи, а утверждения, которые в зависимости от ответов испытуемых могут превращаться в истинные или ложные высказывания . При разработке педагогических тестов придерживаемся данного утверждения. Традиционные вопросы не бывают ложными или истинными, а ответы на них бывают столь неопределенными и многословными, что для выявления их истинности требуются большие затраты интеллектуальной энергии и преподавательского труда. В этом смысле традиционные вопросы и ответы не технологичны, вследствие чего их не рекомендуется включать в тест.

Задание в тестовой форме - это задания, к которым, помимо содержания, предъявляются требования тестовой формы, что делает их формулировки более лаконичными.

Самые жесткие требования предъявляются языку теста - однозначность его понимания испытуемыми, выразительность, лаконичность.

Таким образом, для разработки и применения в учебном процессе рассмотренных выше педагогических тестов необходимо учитывать объективные характеристики подготовительного процесса. А для этого нужно:

1. Выделить цели тестирования.

2. Отобрать педагогические ситуации.

3. Перевести (смоделировать) педагогические ситуации на язык учебных задач.

4. Переконструировать учебные задачи в тестовые задания.

5. Выбрать и оценить эталоны ответов.

6. Разработать план теста. (Предполагается раскладка необходимого числа заданий, исходя из общего предельного числа заданий разного уровня сложности).

7. Выделить аспекты тестирования.

8. Составить тест. (Эта работа должна проводиться опытными преподавателями).

9. Расположить задания в тесте с учетом системообразующих связей.

Следует отметить, что педагогический тест не может состоять из отдельных только легких или трудных заданий, он должен включать в себя задания различного уровня трудности, начиная с легкого и кончая трудным, на которые могут правильно ответить несколько испытуемых в тестируемой группе.

10. Проверить экспериментально разработанный тест.

В заключение следует отметить, что эффективность педагогического теста определяется творческим подходом составителей к разработке системы заданий, соответствующих конкретным целям тестирования.

При создании теста внимание разработчика, прежде всего, привлекают вопросы отбора его содержания, которое можно определить как оптимальное отображение учебной содержания дисциплины в системе тестовых знаний.

Требование оптимальности предполагает использование определенной методики отбора, которая должна включать вопросы целеполагания, планирования и оценки качества содержания теста.

Целеполагание на этапе планирования содержания теста

Этап целеполагания является самым трудным и вместе с тем самым важным. От его результата зависит качество содержания теста. На этом этапе преподавателю необходимо решить вопрос, какие результаты студентов он хочет оценить с помощью теста.

Проблема сегодняшнего дня состоит в том, что представления о наиболее общих целях контроля не позволяют непосредственно перейти к разработке средств измерения. Оказывается необходима промежуточная ступень, которую педагоги назвали предварительной операционализацией целей (этому закрученному выражению проще и лучше соответствует термин «конкретизация»).

Процесс конкретизации характеризуется рядом этапов, которые можно отобразить схематично на рис 1.

Состав требований к планируемым результатам обучения

В состав требований к планируемым результатам обучения обычно включают систему объектов изучения, описание видов учебной деятельности и качество усвоения учебного материала. Все это входит в систему научных знаний.

Первым компонентом требований системы научных знаний является характеристика объектов изучения с учетом глубины их освещения преподавателем и планируемого уровня усвоения студентами.

К элементам системы научных знаний исследователи отнесли понятия и факты, законы, теории, идеи, знания о способах деятельности, методологические и оценочные знания.

Представляет интерес структура умений предложенная проф. И.И.Кулибабой:

 Специальные, формирующиеся в процессе изучения отдельных дисциплин;

 Рационального учебного труда, включающие умения пользоваться различными источниками знаний для решения познавательных задач, умения планировать и организовывать свою учебную деятельность, контролировать и корректировать результаты учебной деятельности, умение управлять последней в процессе учения;

 Интеллектуальные, представляющие собой ядро учебной деятельности и объединяющие все учебные дисциплины вуза.

За рубежом популярна следующая классификация целей обучения (или таксономия – по B.S. Bloom), которая представляет интерес для технологии разработки тестов:

1. Знание названий, имен, фактов.

2. Фактуальные знания.

3. Знание определений и понимание их смысла.

4. Сравнительные и сопоставительные знания.

5. Классификационные знания.

6. Знание противоположностей и противоречий, синомичных и антонимичных объектов.

7. Ассоциативные знания.

8. Причинные знания.

9. Алгоритмические, процедурные знания.

10. Обобщенные системные знания.

11. Оценочные знания.

12. Процессуальные знания.

13. Абстрактные знания.

14. Структурные знания.

15. Методологические знания.

Конкретизация учебных целей четко отражена в стандартах каждой специальности вуза. Профессор Кларин М.В. предлагает категории учебных целей в несколько измененном виде, в удобном для задач педагогического измерения (табл.1).

После определения целей тестирования и их конкретизации разрабатывается план теста и его спецификация. При разработке плана определяется раскладка процентного содержания разделов дисциплины и число заданий по каждому разделу.

Раскладку начинают с подсчета планируемого числа заданий в тесте, которое затем будет меняться в процессе работы над тестом в сторону увеличения или уменьшения. Предельное число заданий в тесте не должно превышать 60-80, поскольку на тестирование отводится время не более 2-х часов. На выполнение одного задания теста отводится примерно 2 минуты. План теста можно свести в табл. 2.

Табл.2 – Пример плана теста

После выполнения планирования содержания теста разрабатывается спецификация теста, в которой фиксируется структура, содержание проверки и процентное соотношение заданий в тесте. Иногда спецификацию делают в развернутом виде. Спецификация теста в развернутом виде включает:

1. Цель создания теста. Обоснование выбора подхода к его созданию. Описание возможных сфер применения.

2. Перечень нормативных документов (стандарты специальности, базисные программ, требования к уровню подготовки выпускников.

3. Описание общей структуры теста, включающее перечень субтестов (если они имеются) с указанием подходов их разработки.

4. Количество заданий различной формы с указанием числа ответов к закрытым заданиям. Общее число заданий в тесте.

5. Число параллельных вариантов в тесте, либо ссылка на кластер, содержащая номера и количество заданий кластера.

8. Соотношение заданий по различным разделам и видам учебной деятельности.

10. Охват требований стандартов (для аттестационных тестов).

11. Перечень требований, не вошедших в тест (для аттестационных тестов).

12. Стратегия расположения заданий в тесте, рекомендуемая разработчиком.

Предположительно, эта спецификация – набор документов для регистрации теста.

Создание краткой спецификации основано на сопряжении знаний и умений с процентным соотношением заданий по различным разделам (содержательным линиям дисциплины), см. п.8. Пример реализации подобного сопряжения показан в табл.3. Перечень знаний и умений условно включены:

А - знание понятий, определений, терминов;

Б - знание законов и формул;

В - умение применять законы и формулы для решения задач;

Г- умение интерпретировать результаты на графиках и схемах;

Д-умение проводить оценочные суждения.

Табл.3 – Гипотетическая спецификация теста

При заполнении ячеек таблицы в распределении заданий числа ставятся приближенно, и в процессе «обкатки» теста первоначальная раскладка может существенно измениться.

Спецификация, предлагаемая сотрудниками ИОСО РАН, основана на процентном соотношении заданий планируемых сообразно разделам дисциплины и видам предполагаемой деятельности испытуемого в процессе выполнения теста.

После отбора содержания теста для разработчика наступает этап создания предтестовых заданий. Грамотно их может сделать опытный преподаватель, -умеющий правильно выбрать форму предтестового задания для проверяемого учебного материала, -имеющий дополнительные знания по теории и методике создания педагогических тестов.

В отечественной и зарубежной научно-педагогической литературе предтестовые задания классифицируют на:

задания закрытой формы (с множественным выбором), в которых тестируемый выбирает правильный ответ из данного набора ответов;

задания открытой формы (задания на дополнение ), требующие от тестируемого самостоятельное получение ответа;

задания на установление соответствия (с множественным выбором), выполнение которых связано с выявлением соответствия между элементами двух множеств;

задания на установление правильной последовательности , в которых тестируемый должен указать порядок действий или процессов.

Аксиома 1 . При составлении предтестовых заданий опираются на общепринятые требования:

каждое предтестовое задание имеет свой порядковый номер, который может изменяться после объективной оценки трудности задания и выбора стратегии предъявления теста;

каждое предтестовое задание имеет эталон правильного ответа;

в предтестовом задании все элементы располагаются на четко определенных местах, фиксированных в рамках выбранной формы;

предтестовые задания одной формы сопровождаются стандартной инструкцией, предваряющей формулировку заданий в тесте;

для каждого задания разрабатывается правило выставления дихотомической или политомической оценки;

предтестовое задание должно быть по форме предъявления и по времени выполнения достаточно кратким.

Аксиома 2. Процесс тестирования стандартизуется, если:

ни одному тестируемому не дается никаких преимуществ перед другими;

система подсчета баллов ко всем ответам тестируемых без исключения;

в тест включаются задания одной формы, либо разных форм с соответствующими весовыми коэффициентами, полученные статистическим путем;

тестирование различных групп испытуемых проводится в одинаковое время и сходных условиях;

группа тестируемых выровнена по мотивации;

все испытуемые отвечают на одни и те же задания.

Задания закрытой формы имеют недостаток в быстром рассекречивании и плохо удовлетворяют условию (аксиома 2,п.6.). В заданиях закрытой формы имеется основная часть, содержащая постановку проблемы, и готовые ответы, сформулированные разработчиком теста. Обычно правильным ответом бывает только один. Правдоподобные ответы называются дистракторами. Число дистракторов в задании, как правило, не более пяти (редко – 7). Дистрактор, называют неработающим, если ни один из тестируемых его не выбрал. Такой дистрактор убирают. Если разработчику трудно представить дистракторы, то используют два метода их получения:

1. Для получения правдоподобных дистракторов студентам предъявляются незаконченные списки вариантов выбора, с последующим использованием неправильных ответов;

2. Предъявление группе испытуемых заданий в открытой форме и последующим анализом типичных ошибок в дописанных ответах.

Тестовое задание считается «хорошо работающим», если знающие студенты выполняют его правильно, а незнающие выбирают любой из ответов с равной вероятностью.

Если тестирование производится с помощью бланков, то задания закрытой формы с одним правильным ответом сопровождаются инструкцией:

ОБВЕДИТЕ НОМЕР (БУКВУ) ПРАВИЛЬНОГО ОТВЕТА.

При компьютерной выдаче заданий может быть инструкция вида:

НАЖМИТЕ КЛАВИШУ С НОМЕРОМ (БУКВОЙ) ПРАВИЛЬНОГО ОТВЕТА

Предтестовые задания в закрытой форме с одним правильным ответом выполняют по следующим правилам:

в тексте задания не должно быть двусмысленности и неясности формулировок;

основная часть задания формулируется из одного предложения из семи- восьми слов (желательно);

задание имеет простую синтаксическую конструкцию, одним придаточным предложением (желательно);

основная часть должна содержать как можно больше слов, оставляя для ответа не более 2-3 ключевых слов для данной проблемы;

ответы к одному заданию должны быть одной длины, либо правильный ответ может быть короче других в пределах задания;

исключаются все вербальные ассоциации , способствующие выбору правильного ответа с помощью догадки;

частота выбора одного и того же номера для правильного ответа в различных заданиях текста должна быть одинакова, либо этот номер может быть случайным;

основная часть задания освобождается от всякого иррелевантного материала;

основная часть формулируется в форме утверждения, которая обращается в истинное или ложное высказывание после подстановки одного из вариантов ответа;

из числа тестовых исключаются задания, содержащие оценочные суждения и мнения студента по какому-либо вопросу.

дистракторы должны быть равно привлекательными для испытуемых, не знающих правильного ответа;

ни один из дистракторов не может быть частично правильным ответом, превращающихся при определенных дополнительных условиях в правильны ответ;

из ответов исключаются все повторяющиеся слова путем ввода их в основной текст задания;

из числа неправильных исключаются ответы, вытекающие один из другого;

ответ одного задания не должен служить ключом к правильным ответам другого задания, т.е. нельзя использовать дистракторы из одного задания в качестве правильных ответов другого;

все ответы должны быть параллельными по конструкции и грамматически согласованы с основной частью задания теста;

если в задании имеются альтернативные ответы, то не следует их ставить рядом с правильным, ибо на них будет сразу сосредоточено внимание.

Создать тест, удовлетворяющий всем этим правилам невозможно. Но принято считать, что если тест удовлетворяет 9-10 рекомендациям, то он – рабочий.

Задания открытой формы (задания на дополнение)

В заданиях на дополнение готовые ответы не даются. Их должен получить тестируемый. Эти задания встречаются двух видов:

1. С ограничениями, налагаемыми на ответы, возможности получения которых соответствующим образом определены по содержанию и по форме представления;

2. Со свободно конструируемыми ответами, в которых испытуемые должны составить развернутый ответ в виде решения задачи или эссе.

Задания второго вида не имеют никаких ограничений на содержание и форму представления ответов. Эти задания близки к традиционным контрольным заданиям, и поэтому положительно воспринимаются большинством преподавателей. Но они требуют больших затрат на проверку и сложнее поддаются компьютеризации.

При ответе на открытое задание с ограниченным ответом испытуемый дописывает пропущенное слово, формулу, символ или число на месте прочерка. Разработка заданий на дополнение с ограниченным ответом подчиняются следующим правилам:

1. каждое задание должно быть нацелено только на одно дополнение, место которого обозначено точками или прочерком;

2. Прочерк ставится на месте ключевого элемента, знание которого является наиболее существенным для контролируемого материала;

4. Дополнения ставятся в конце задания или как можно ближе к концу;

5. После прочерка, при необходимости, указываются единицы измерения;

6. Текст задания должен иметь простую синтаксическую конструкцию и содержать минимальное количество информации, необходимое для правильного выполнения задания;

7. В тексте исключаются повторы и двойное отрицание.

Задания на установление соответствия

В заданиях на установление соответствия тестируемый должен показать знание связей между элементами двух множеств. Слева обычно приводятся элементы задающего множества, содержащие постановку проблемы, а справа – элементы, подлежащие выбору. Возможно иное расположение. К заданиям прилагается стандартная инструкция состоящая из двух слов:

УСТАНОВИТЕ СООТВЕТСТВИЕ

При разработке заданий на соответствие руководствуются следующими правилами:

2. Элементы задающего столбца располагаются слева, а элементы выбора – справа;

3. Желательно, чтобы каждый столбец имел определенное название, обобщающее все элементы столбца;

4. Необходимо, чтобы правый столбец содержал несколько дистракторов (лучше, когда их в 2 раза больше);

5. Необходимо, чтобы все дистракторы в одном задании были равновероятно правдоподобны;

6. Элементы столбцов должны быть выбраны по одному основанию для включения только гомогенного материала в каждое задание теста;

7. В дополнительной инструкции к заданию необходимо сообщить испытуемому о наличии дистракторов в правом столбце, и сколько раз используется каждый элемент правого столбца (один или более);

8. задание располагается на одной странице, без переноса его элементов на другую.

Основная трудность в разработке такого вида тестов связана с подбором правдоподобных избыточных элементов в правом множестве. Мера правдоподобности каждого избыточного элемента устанавливается эмпирически.

Задания на установление правильной последовательности

Задания четвертой формы предназначены для оценки уровня владения последовательностью действий, процессов и т.п., которые приводятся в случайном порядке. Испытуемый должен установить правильный порядок действий, процессов и указать его с помощью цифр (алгоритм сортировки). Инструкция к заданиям имеет вид:

Эти задания специфичны. Содержание многих дисциплин сложно трансформировать в задания этой формы.

Сравнительная характеристика форм предтестовых заданий.

Выбор форм предтестовых заданий определяется спецификой содержания учебной дисциплины, целями создания и применения теста.

Легко организовать компьютерный сбор и анализ результатов теста в том случае, когда все задания имеют закрытую форму. Результаты выполнения заданий на дополнение с ограниченным, а тем более с открытым ответом требуют ручной обработки. Потребуется и привлечение экспертов.

В каждом тесте можно использовать несколько форм, но желательно, чтобы их было в одном тесте как можно меньше. Этим отличаются профессиональные тесты. Требование единства формы очень важно при создании итоговых тестов. С другой стороны, требование моноформости не всегда выполнимо, поэтому часто приходится идти на совмещение форм, что негативно отражается на точности измерений.

Для облегчения проблемы выбора результаты сопоставительного анализа двух первых форм сведены в табл. 4.

Табл. 4.- Сопоставительный анализ предтестовых заданий

Пример тестового задания четвертой формы

УСТАНОВИТЕ ПРАВИЛЬНУЮ ПОСЛЕДОВАТЕЛЬНОСТЬ

Для создания системы тестового контроля в учебном заведении по месту работы необходимо:

создать банк тестовых заданий

разработать программно-инструментальные средства

провести с преподавателями своего учебного заведения занятия по методике конструирования тестов

выдать тесты учащимся для сбора эмпирических данных

доложить руководству о результатах обучения

сформировать коллектив преподавателей - разработчиков тестов

приступить к созданию тестов

интерпретировать результаты обработки

внимательно разобрать и осмыслить содержание прослушанных лекций по методике конструирования тестов.

ЛИТЕРАТУРА:

Аванесов B.C. Научные проблемы тестового контроля знаний. Учебное пособие. М., 1994. - 135 с.

Гуревич К.М. Методы тестирования в дидактических исследованиях. Методы педагогических исследований. М., 1979. С. 139 - 158.

Бернштейн М.С. К методике составления и проверки тестов. Вопросы психологии. 1968. N 1. С. 51-66.

Аванесов B.C. Основы научной организации педагогического контроля в высшей школе: Учебное пособие для слушателей Учебного центра. М., 1989. ≈ 107 с.

Психологическая диагностика: Учебное пособие. Научно-издательский центр Бийского пединститута, 1993. ≈ 324 с.

Энциклопедический словарь. Гл. ред. A.M. Прохоров. 3-е изд. М.: Советская энциклопедия, 1985. ≈ 1600 с.: ил.

Сосновский В.И., Тесленко В.И. Вопросы управления в обучении. Часть 1. (Педагогическое тестирование). Красноярск, 1995. ≈ 90 с.

Моделирование педагогических ситуаций: Проблемы повышения качества и эффективности общепедагогической подготовки учителя. Под ред. Ю.Н. Кулюткина, Г.С. Сухобской. М.: Педагогика, 1981. ≈ 120 с.: ил.

Майоров А.Н. Теория и практика создания тестов для системы образования. - М., "Интеллект центр", 2001. - 296 с.

Кузнецов А., Пугач В., другие. Тестовые задания. Информатика. Методическое пособие. М., Лаборатория Базовых знаний, 2002.

По созданию заданий закрытой формы. Помимо них, существуют задания на установление соответствия, задания на установление последовательности и задания открытой формы. Дмитрий Аббакумов, руководитель Лаборатории адаптивных образовательных технологий ВШЭ, делится практическими советами в новом выпуске рубрики.

Задания на установление соответствия

Такие задания содержат два параллельных списка. Первый обычно включает достаточно длинные позиции – это список условий. Испытуемый должен сопоставить каждую позицию из списка условий с позицией из списка ответов. Элементы списка ответов обычно формулируются лаконично. Преимуществами заданий на установление соответствия являются их компактность и возможность охвата большого количества проверяемых знаний. Однако они имеют и недостатки: при их конструировании трудно подобрать однородные списки, а сами задания стимулируют исключительно процессы запоминания фактов.

Задания на установление соответствия требуют очень чётких инструкций. Инструкции должны содержать информацию о том, на каком основании должно устанавливаться соответствие, а также может ли один ответ использоваться дважды или не использоваться вовсе.

Принципы составления заданий:

• Оптимальное задание содержит от 4 до 10 условий.
• По возможности составляйте задания так, чтобы количество условий не равнялось количеству ответов (это позволит сократить риск угадывания на последнем этапе работы с заданием).
• При необходимости организуйте условия в логической последовательности, например, в хронологическом порядке или по алфавиту.

Пример задания на установление соответствия:

(инструкция) Запишите в специальном поле для ответов букву, подходящую для каждого элемента из первого (нумерованного) списка. К каждому элементу из первого списка может относиться один элемент из второго списка.
(формулировка задания) При формировании представления о партнере по общению люди используют четыре основных механизма. В левом списке перечислены их названия, а в правом даны определения. Сопоставьте их между собой.

Задания на установление последовательности

Подобная форма заданий используется, когда требуется оценить знания этапов и событий какого-либо процесса. Эти задания также требуют чёткой инструкции, из которой должно быть понятно, в какой форме нужно фиксировать последовательность. Оптимально, если задание содержит от 3 до 7 элементов. А главным при конструировании таких заданий является то, чтобы используемая последовательность не являлась искусственной (например, известной и понятной только автору задания).

Задания открытой формы

Есть два типа заданий: с коротким ответом и с развернутым ответом. Задания с коротким ответом могут быть организованы как вопросы или как задания на дополнение. Задание-вопрос представляет собой конкретный вопрос, на который можно ответить одним словом, фразой, числом или символом. Задание на дополнение – это неполное утверждение, которое необходимо дополнить одним словом, фразой, числом или символом. Неоспоримым преимуществом заданий с коротким ответом является очень низкая вероятность угадывания. Недостатком является то, что при их конструировании необходимо учесть все варианты, которые могут быть правильными. Для задание с коротким текстовым ответом важно не забыть о нюансах согласования. А для заданий с числовым ответом – о количестве знаков после запятой или интервале значений.

При конструировании заданий с коротким ответом нужно избегать невольных подсказок, когда формулировка вопроса или утверждения наводит на правильный ответ; а также большого количества пропусков, так как тогда может потеряться смысл задания.

Задания с развернутым ответом предполагают, что ответ испытуемого на поставленный вопрос будет содержать несколько предложений или ответом будет законченный короткий текст. Эти задания позволяют оценить навыки интерпретации, анализа и оценки применительно к конкретным ситуациям. Их преимуществом является то, что они сочетают в себе разные мыслительные процессы, дают испытуемому возможность самому конструировать ответ, оценивают и развивают навыки письменной речи. Однако такие задания являются сложными и дорогостоящими с точки зрения проверки. Часто компьютер для таких заданий выполняет лишь функцию сбора ответов, а не их проверки. Для обеспечения объективности необходимо привлечение 2-3 экспертов. Тем не менее, важно отметить, что в настоящее время активно внедряются машинные способы проверки таких заданий, результаты которых сопоставимы с экспертными оценками, например, при проверке эссе в компьютерных тестах на знание английского языка.

• Используйте такие задания только в тех случаях, где оценка другими, более объективными способами, не применима.
• Убедитесь, что задание соотносится с целями обучения.
• Для заданий с ограниченным объёмом четко задайте объём и элементы содержания.
• Для заданий со свободным объёмом дайте четкие рекомендации по выполнению и оформлению, а также минимальные требования к содержанию.
• Установите время выполнения.

Пример неудачной формулировки задания с развернутым ответом:

Почему символы так важны в произведении «451 градус по Фаренгейту»?

Пример оптимизированной формулировки задания с развернутым ответом:

Символы очень важны в произведении «451 градус по Фаренгейту». Какие три, по Вашему мнению, являются наиболее важными в нём? Опишите их и выделите их роль и смысл в этом произведении.

Итак, мы разобрались в основных формах тестовых заданий, используемых в компьютерном тестировании. Следующий материал будет посвящен одному из важнейших этапов в разработке теста – экспертизе качества тестовых заданий.

При подготовке текста использовались материалы лекций академического руководителя магистерской программы «Измерения в психологии и образовании» к. психол. н. Екатерины Алексеевны Орел.

Дмитрий Аббакумов

Предтестовые задания на установление соответствия

Общая характеристика. Задания на соответствие имеют специфический вид: под инструкцией располагаются элементы двух множеств, соответствие между которыми предлагается установить учащемуся ; слева обычно приводятся элементы задающего множества, содержащего постановку проблемы; справа -- элементы, подлежащие выбору.

Соответствие между элементами двух столбцов может быть взаимно однозначным, когда каждому элементу слева соответствует только один элемент справа. Если число элементов в двух столбцах одинаковое, то для последнего элемента задающего множества выбора не произойдет, поэтому в множество для выбора стараются включить несколько дистракторов.

Установите соответствие между датами и внешнеполитическими событиями. К каждому из 4 элементов (1,2,3,4) подбирается один соответствующий элемент (а, б, в, г, д).

Даты События

1) 1922г. а)подписание Рапалльского договора с Германией

2) 1924г. б)заключение договора о ненападении с Германией

3) 1934г. в)заключение Брестского мира с Германией

4) 1939г. г)вступление в Лигу Наций

д)«полосадипломатическогопризнания»СССР

Задания на установление соответствия по алгоритму выполнения близки к заданиям с выбором ответа, поскольку ученик выбирает из числа ответов, предложенных преподавателем, правильный ответ. За рубежом задания на соответствие не выделяют в отдельный вид, а считают одной из разновидностей заданий с выбором ответов. Как и в заданиях с выбором ответов, наибольшие трудности при разработке связаны с подбором правдоподобных избыточных элементов в правом множестве. Мера правдоподобности каждого дистрактора устанавливается эмпирически. В итоговом контроле задания на соответствие малоэффективны в силу их громоздкости, не позволяющей охватить большой объем содержания.

Оценивание результатов выполнения заданий на соответствие. Результаты выполнения заданий на соответствие оцениваются либо дихотомической, либо политомической оценкой. При дихотомическом оценивании за все правильно установленные соответствия в задании теста ставится «1». Если хотя бы одно соответствие неверно, то за частично правильно выполненное задание на соответствие учащийся получает «О».

При политомическом оценивании за каждое правильное соответствие ставится «1». В этом случае при проверке заданий на соответствие используется политомическая оценка, и общее количество баллов за задание равно числу правильно установленных соответствий.

Задания на установление правильной последовательности

Общая характеристика. Тестовые задания четвертой формы пред-назначены для оценки уровня владения последовательностью действий, процессов и т.п. Элементы, связанные с определенной задачей, приводятся в заданиях в произвольном порядке, а ученик должен установить правильный порядок предложенных элементов и указать его заданным способом в специально отведенном для этого месте .

Стандартная инструкция к заданиям четвертой формы имеет следующий вид: «Установите правильную последовательность». Иногда инструкцию включают в текст задания.

Расположите имена русских полководцев в хронологической последовательности их деятельности. Запишите буквы, которыми обозначены имена в правильной последовательности:

А) Дмитрий Пожарский

Б) Алексей Ермолов

В) Михаил Скобелев

Г) Алексей Орлов

Во многих случаях задания на установление правильной последовательности крайне нетехнологичны или неприменимы в силу специфики содержания предмета. Они громоздки и нередко до-пускают неоднозначную последовательность ответов.

Сравнительная характеристика форм предтестовых заданий

В процессе разработки теста у автора всегда возникает вопрос,остановиться на какой-нибудь одной форме заданий или совместить различные формы в одном тесте? Выбор автора во многом должен определяться спецификой содержания учебной дисциплины, целями создания и применения теста. Немало в данном случае зависит от технологии проверки, сбора и обработки эмпирических данных, от технического и материального обеспечения процесса применения теста.

Организовать компьютеризованный сбор и анализ результатов выполнения теста легко, если тест состоит лишь из заданий с выбором ответов. Результаты выполнения заданий с конструируемыми ответами требуют ручной обработки и привлечения экспертов,а следовательно - дополнительных материальных затрат и времени на проверку. Обилие форм в тесте затрудняет работу ученика и значительно усложняет статистическую обработку эмпирических результатов выполнения теста.

К сожалению, требование моноформности не всегда выполнимо, поскольку не все знания и умения ученика можно проверить с помощью моноформного теста. В связи с этим часто приходится идти на совмещение форм, что при прочих равных условиях всегда негативно отражается на точности измерений, обеспечиваемой тестом. Выбор оптимальной формы предтестовых заданий обычно бывает связан со спецификой содержания теста. При этом приходится учитывать достоинства и недостатки каждой из форм (табл. 1) и принимать определенное компромиссное решение в процессе такого выбора.

Эксперт: в области информационных технологий и учебного видео

Прежде чем мы перейдем к принципам разработки тестов, необходимо сделать ряд замечаний.

Различия между тестом и заданиями в тестовой форме

В обыденном сознании постоянно смешиваются понятия теста и системы заданий в тестовой форме (или предтестовых заданий).

Как правило, тест разрабатывается коллективом исследователей и апробируется в течении определенного времени. После апробации в тест вносятся коррективы. Тест состоит из тестовых заданий. В англоязычной литературе для обозначения теста употребляется термин «Quiz» (но не «Test»!).

Таким образом, преподаватель (учитель) не может создавать тесты. Вместо этого, он разрабатывает задания в тестовой форме, которые внешне похожи на тест, но не проходят статистической и иной апробации. Такие задания можно использовать в образовательном процессе для решения определенных педагогических задач.

Из этого следует принципиальная невозможность использования ряда характеристик теста. Например, трудность тестового задания определяется экспериментально, исходя из результатов большого объема выборки учащихся. На практике учитель не располагает как временем для проведения эксперимента, так и необходимым объемом выборки. Поэтому часто трудность определяется «на глазок».

В общем виде задания в тестовой форме (как и тестовые задания) отвечают следующим требованиям:

• краткость;
• технологичность;
• определённость цели;
• логическая форма высказывания;
• определенность места для ответов;
• одинаковость правил оценки ответов;
• правильность расположения элементов задания;
• одинаковость инструкции для всех испытуемых;
• адекватность инструкции форме и содержанию задания.

Так, краткость заданий в тестовой форме обеспечивается тщательным подбором слов, символов, графиков, позволяющих минимумом средств добиваться максимума ясности смыслового содержания задания. Технологичность заданий определяется как свойство, которое позволяет вести процесс тестирования с помощью технических средств, и делать это точно, быстро, экономично и объективно. Логическая форма высказывания – это средство упорядочения и эффективной организации содержания задания.

Формы тестовых заданий

Кроме того, принципы разработки тестовых заданий (заданий в тестовой форме) связаны с их формами. Разные авторы по-разному классифицируют формы тестовых заданий. Положение усугубляется тем, что каждая автоматизированная система для проведения тестирования называет одни и те же формы по-разному. Обобщим все многообразие форм тестовых заданий следующей классификацией.

1. Верно/Неверно (Правда или Ложь, от анг. True or False) – содержит утверждение, с которым обучающийся должен либо согласиться, либо нет.

Например:

Первым президентом США был Джордж Вашингтон

1. Верно
2. Неверно

В ЕГЭ подобные задания встречаются в КИМах по иностранным языкам в заданиях на аудирование: учащиеся слушают текст, далее переходят к заданиям типа Правда или Ложь.

Данная форма тестовых заданий самая простая как для составления преподавателем, так и для ответа обучающимся. Такие формы задания характеризуются высокой степенью угадывания правильного ответа.

2. Множественный выбор (задания с выбором одного или нескольких правильных ответов). Эта самая распространённая форма тестовых заданий. Она содержит утверждение (вопрос) и альтернативные ответы.

Для заданий с выбором одного правильного ответа рекомендуется не менее 4 (если меньше, то вероятность угадывания правильного ответа увеличивается) и не более 6 (трудно придумать правдоподобные альтернативы).

Для заданий с выбором нескольких правильных ответов рекомендуется не менее 6 альтернатив.

3. Задания на установление соответствия. Оно представляет собой набор элементов в двух столбцах – обучающемуся нужно установить соответствие между элементами левого и правого столбцов. Наличие заголовка для каждого набора столбцов является обязательным – он позволяет учащемуся не тратить время на обобщение элементов в столбцах и сразу перейти к упражнению.

Сравните:

1. a) Ярлык
2. b) Улус
3. c) Волостень
4. d) Порок
5. e) Плинфа

1. Стенобитное сооружение
2. Кирпич
3. Ханская грамота
4. Правитель волости
5. Владение

Тоже задание, переформатированное с учетом специфических требований:

Как мы видим, во втором случае задание более читабельно, его смысл легко улавливается. Обратите внимание, что, например сервис OnlineTestPad и некоторые другие позволяют добавлять такие заголовки. Другие (как Moodle) не обладают таким функционалом. В этом случае необходимо писать полную инструкцию, например, «Установите соответствие между ….и….»

В бумажных тестах такой формы заданий для правильного ответа предлагается заполнить специальную табличку. Вариант со стрелочками считается менее технологичным для проверки, поэтому его следует избегать.

Также желательно устанавливать нечетное количество элементов левого и правого столбца, чтобы последний элемент выбирался не методом исключения.

Посмотрите на это задание:

Расположите имена русских полководцев в хронологической последовательности (по возрастанию) их деятельности

Дмитрий Пожарский

Алексей Ермолов

Михаил Скобелев

Алексей Орлов

Это тоже задание на установление соответствия, точнее, его разновидность – задание на установление правильной последовательности. Ряд зарубежных исследователей склонны к такому объединению. Именно поэтому, например в Moodle мы не найдем такой формы. Но ее легко можно сконструировать из задания на установление соответствия. Для наглядности немного переформатируем предыдущее задание:

Мы видим классическое задание на соответствие, просто левый столбец представляет собой числовой порядок. Правильные ответы обучающийся также заносить в специальную таблицу.

Иногда описанные выше задания верно-неверно, множественного выбора и соответствия объединяют в группу заданий закрытого типа , которые обладают следующими общими чертами:

• Присутствует в явном виде правильный ответ, его нужно просто выбрать тем или иным способом;
• Ответы на вопросы можно угадать (вероятность угадывания вырастает с уменьшением количества альтернатив);
• Ответы можно припомнить
• Ответы можно подобрать логически, откинув явно неправильные альтернативы.

5. Дополнение (краткий ответ). В этих заданиях учащемуся необходимо дописать правильный ответ. Иногда такой тип заданий называют заданиями открытого типа. В отличие от рассмотренных выше форм тестовых заданий, такие стратегии как угадывание, припоминание правильного ответа и др. «не работают». Поэтому данный тип задания считается более трудным для обучающихся.

6. Эссе – краткий ответ учащегося по сути вопроса. Строго говоря эссе не является формой тестового задания, т.к. он не соответствует необходимым критериям краткости, технологичности и прочее. По нашему мнению, эссе было введено для преодоления известных трудностей при составлении типичных тестовых заданий, главные из которых – невозможность представить весь учебный материал в тестовом виде и репродуктивный характер типичных тестовых заданий.

Тем не менее в заданиях эссе должны быть предложен(ы) эталон(элементы) оптимального ответа вместе со стандартизованными правилами оценки результатов его выполнения.

При каких значениях х соответственные значения функций f(х)=log 2 x и g(х) = log 2 (3 – х) будут отличаться меньше, чем на 1?

Критерии для оценивания правильного ответа

Принципы разработки заданий в тестовой форме

Следующее, на чем нас стоит остановиться – на принципах разработки заданий в тестовой форме.

Долгое время существовала убеждённость, что тест сам по себе является объективным средством контроля. Однако затем пришло понимание, что тест обеспечивает, в первую очередь процедурную объективность. Для оценки же качества теста существует ряд смежных направлений – надежность (гарантия отсутствия в тесте случайных ошибок), валидность (гарантия, что тест измеряет именно то, что он должен измерять), трудность и т.д. Как мы указывали выше, все эти параметры разрабатываются на основе различных математических моделей в ходе экспериментальной работы авторского коллектива и недоступны для учителей, преподавателей. Поэтому мы лишь остановимся на ряде теоретических требований к разработке заданий в тестовой форме.

1. Начинайте конструировать задание с правильного ответа. Часто так случается, что задание формально содержит больше правильных ответов, чем запланировано. Встречаются и обратные случаи – задание вообще не содержит правильного ответа.
2. Содержание задания опирается на требования программы и отражает предметное (метапредметное) содержание. Иногда в тест пытаются включить вопросы, правильного ответа на которые просто не существует.

Например:

Мы будем изучать латинский язык потому, что…

1. На нем говорят во многих странах мира
2. Хотим лучше понимать родной язык, так как в нём много слов, заимствованных из латыни
3. Хотим лучше понимать историю и культуру древнего мира

Это хорошее задание. Но его следует использовать в социологическом опросе, а не в заданиях на проверку учебных достижений.

1. Вопрос должен быть направлен на выявление одного элемента знания, одной законченной мысли. В противном случае трудно диагностировать причину невыполнения задания.

Конфуций..

1. жил в Африке
2. жил в Китае
3. был врачом
4. был правителем
5. был философом

Данное задание направленно на выявление сразу двух элементов – где жил Конфуций и кем он был. Необходимо разделить эти два вопроса.

1. При составлении вопросов следует избегать слов «иногда», «часто», «всегда», «мало», «больше» и т.д. Подобные слова имеют субъективное значение и могут приводить к ошибочным ответам. Тестовые задания (задания в тестовой форме) должны иметь четкий однозначный ответ.
2. Избегайте вводных фраз или предложений, имеющих мало связи с основной мыслью, не следует прибегать к пространным утверждениям.

Например:

«Анадырская впадина. Очень плоско, и Анадырь по ней виляет огромным удавом… «Анадырь – жёлтая река», – можно так назвать потом очерк. Тундра и озёра по всей впадине. Трудно понять, чего больше: или озёр, или земли» (О. Куваев). В какое море впадает эта река?

1. Правильные ответы должны быть правдоподобны, умело подобраны, не должно быть явных неправильных ответов (они являются своеобразной подсказкой – данный ответ уж точно является ошибочным). Неправильные ответы, очень похожие на правильные, называют дистракторами. Например:

Родина Карла Маркса:

1. Трир
2. Карл-Маркс-Штадт
3. Штургард
4. Мюнхен

Здесь можно предположить, что город Карл-Маркс-Штадт получил свое название потому, что в именно в нем родился Карл Маркс. Однако правильный ответ – Трир.

1. Не следует задавать вопросы с подвохом – скорее всего в заблуждение будут введены наиболее способные или осведомленные учащиеся, которые знают достаточно для того, чтобы попасться в ловушку, а также это противоречит цели – определению уровня знаний и понимания.
2. Следует использовать более длинные вопросы и более короткие ответы, грамматически согласованные с основной частью задания .

Например:

Какое суждение верно?

1. Неполные предложения ‒ это предложения, в которых пропущен один из главных членов
2. Неполные предложения ‒ это предложения, в которых пропущен один из второстепенных членов
3. Неполные предложения ‒ это предложения, в которых пропущен какой-либо член предложения ‒ главный или второстепенный

Нетрудно увидеть, что здесь есть повторяющееся словосочетание, которое и следует вынести в формулировку задания:

Неполные предложения ‒ это предложения, в которых пропущен

1. один из главных членов
2. один из второстепенных членов
3. какой-либо член предложения ‒ главный или второстепенный

1. Не используйте отрицание в основной части вопроса. Во-первых, это приводит к непониманию сути задания. Во-вторых, объектом контроля должны быть элементы знания, а не элементы незнания.

Например:

Жили ли или нет эти люди в реальности в Древней Греции?

1. Гомер
2. Ахилл
3. Зевс
4. Перикл
5. Фидий
6. Аристотель
7. Сократ

В данном случаи не ясно как отвечать – да жили, или да не жили. Поэтому вопрос нужно сформулировать более точно, например: Назовите мифологических персонажей Древней Греции.

1. При чередовании правильных ответов в вопросах не должно быть явной системы – например, всегда только 1 варианты правильные, или правильными вариантами являются последовательно первый, второй, третий, четвертый вариант. В компьютерном тестировании обычно такой проблемы не существуют, потому что компьютер автоматические перетасовывает альтернативы.
2. Если ставится вопрос количественного характера, то необходимо указать последовательность (от меньшего к большему или наоборот) выбора правильных ответов .

Например:

Удаленность от Солнца

a) Сатурн

b) Меркурий

c) Земля

d) Уран

e) Венера

f) Марс

В данном пример существуют как бы два набора правильных вариантов ответов – одна последовательность от наиболее близкой планеты от Солнца, другая – от наиболее удаленной.

1. Вопрос и ответ должны отличаться шрифтовым и пространственным оформлением. Например, вопрос (задание) выделяется жирным шрифтом, ответ – обычным. Для записи ответов используются дополнительные отступы. Но это правило касается только бумажных тестов – в компьютерных автоматизированных системах оформление задается программное, которое изменять не целесообразно.

И помните – не каждое задание можно представить в виде тестового контроля.

При написании статьи использовались примеры http://koi.tspu.ru/koi_books/samolyuk/