Тест и тестовое задание. Н. М. Олейник

Определение теста

Педагогический тест – это система заданий специфической формы, определенного содержания, возрастающей трудности, позволяющая качественно оценить структуру и измерить уровень знаний, умений и навыков. Чтобы выполнять функцию инструмента измерения, тест должен состоять из достаточного количества тестовых заданий, число которых определяет длину теста. По своей длине тесты могут быть короткими (10-20 заданий), средними и длинными (до 500 и более заданий). Оптимальное количество заданий, на которое испытуемые еще достаточно охотно отвечают в один присест, составляет 40-60.

Ключевые слова в определении теста – задание и его форма. Форуме заданий ниже посвящен целый раздел. Само же задание по своему содержанию – это исходная единица, клеточка теста, содержащая какой-то один элемент знания. Только при этом условии тестовое задание представляет собой дидактическое и технологически целесообразное средство объективного контроля подготовленности учащегося.

В ходе педагогического процесса тест выполняет следующие функции: диагностическую, обучающую, организующую и воспитывающую. Введение тестового контроля существенно повышает мотивацию обучения и заинтересованность обучаемого.

Преимущество теста перед традиционными формами контроля

Возможность количественного измерения уровня знаний и трудности заданий

Кроме теста, другого технологического инструмента для количественного измерения таких скрытых (латентных) педагогических параметров, как уровень знаний и трудность заданий в настоящее время не существует. Причем, и тест не позволяет определить эти величины сразу и прямо. Только специальная математическая статистическая обработка результатов тестирования дает возможность методом последовательных итераций (приближений) получить количественные оценки указанных параметров с заданной степенью точности.

Усваивающим эту технологию педагогам нематематического профиля не надо бояться такой обработки, ибо на современных ЭВМ она осуществляется в считанные минуты. При этом не только определяется уровень знания каждого обучаемого, но качественно оценивается и структура его знания. Под структурой знания, очевидно, следует понимать систематичность знаний обучаемого, позволявшая определить, какие разделы предмета он знает, а какие нет. Более того, структура знания позволяет легко выявить обучаемых, обладающих антизнаниями.

Имеются такие педагогические характеристики, как уровень интеллекта, темперамент, коммуникативность, совместимость и т.д., которые без применения теста количественно оценить невозможно. Если уровень знаний и трудность заданий может, хотя и субъективно, оценить каждый опытный преподаватель, то для оценки перечисленных характеристик человеческого индивида нет другого инструмента, кроме теста.

Объективность оценки и полный охват знаний при тестовом контроле

Экзамен дает субъективную оценку, которую трудно сравнивать для разных педагогов, разных учебных дисциплин и разных учебных заведений. Тест же дает количественную оценку, независимую от личности педагога, что позволяет объективно определять уровень подготовки каждого класса или группы, каждой школы или вуза. Более того, тест дает возможность определить и сравнить уровень подготовки по разным дисциплинам и уровень общей подготовки.

Экзамен осуществляет выборную проверку знаний испытуемого. Например, имеется 30 билетов по какому-то курсу. Таким образом, испытуемый демонстрирует преподавателю только 1/30 своих знаний. Разве у преподавателя при этом может быть уверенность, что сдающий экзамен знает остальные 29 частей курса так же хорошо? Ведь не исключена ситуация, когда испытуемый остальную часть курса вообще не знает. Тест же, состоящий из множества мелких вопросов, охватывает весь предмет в целом и поэтому дает информацию о знании каждым испытуемым всего курса.

Конечно же при тестировании должны быть соблюдены такие условия, которые исключают контакт тестируемых между собой, возможность списывания и подсказки. Объективность тестирования, особенно в условиях применения персональных ЭВМ, позволяет избежать и изжить такие уродливые явления как протекционизм, взяточничество и др.

Систематичность контроля и индивидуальный подход к обучению каждого испытуемого

Тест позволяет контролировать педагогический процесс на каждом занятии, что дает возможность педагогу немедленно вносить коррективы в обучение. Более того, количественное измерение уровня знаний каждого ученика или студента позволяет осуществить полную индивидуализацию его обучения. Педагогу не надо натаскивать подавляющее количество средних студентов в группе и самому терять за счет этого свой интеллект, эту функцию берет на себя машина. Обучающийся же волен выбирать программу обучения такой трудности, которая соответствует его уровню знания, чем и обеспечивается полная индивидуализация обучения. При этом интеллект талантливого индивида не будет загублен в средней массе обучаемых, как не будут погублены способности слабого, не способного усвоить данный предмет, но склонного к какой-либо другой области человеческой деятельности.

Технологичность тестов

Технологичность – одно из важнейших свойств тестов, которое позволяет полностью автоматизировать процесс обучения по строго индивидуальным программам и кардинально его совершенствовать. Ни одна из традиционных форм контроля знаний все сказанное выше сделать не позволяет.

Недостатки тестов

Возможность угадывания

Если, например, закрытое тестовое задание содержит только два ответа, один из которых правильный, то вероятность угадывания правильного ответа равна 0,5, т.е. половину ответов на такие тестовые задания можно угадать. Однако, поправку на угадывание можно легко ввести в оценку по формуле:

(1.1)

где:

• Xi – суммарный балл i-го тестируемого при двоичной (дихотомической) системе оценок, когда 1 балл дается за правильный ответ, а 0 – за неверный ответ;
• Xc– оценка с поправкой на угадывание;
• Wi– число неправильных ответов того же тестируемого;
• k – число ответов в задании.

Относительная трудность создания качественного теста

Согласно классической теории тестов для создания качественного теста требуется большая выборка испытуемых, состоящая из нескольких десятков тысяч человек. Это требование практически невыполнимо в условиях любого вуза. Однако латентная, методика анализа позволяет снизить количество испытуемых уже до 500 при очень высоком качестве создаваемых тестов и даже до 150-200 при вполне достаточной надежности тестов. Это условие уже выполнимо в рамках одного вуза или школы, хотя создание теста и потребует существенного количества времени.

Наличие технических средств обучения

Современная технология обучения требует наличия автоматизированных рабочих мест преподавателя и обучаемых, обеспеченных персональными ЭВМ и другим не менее дорогим оборудованием. Таким образом, современное обучение будет весьма дорого стоить, но оно всегда себя окупит. Ибо только образование и культура могут спасти человеческую общность от тупикового развития.

Ошибки педагогических измерений

Педагогические измерения, как и все другие, всегда производятся с определенной ошибкой. Поэтому критики говорят, что раз измерения не точны, то не стоит заниматься делом, которое связано с ошибкой. Кстати, то же имеет место и в случае физических измерений, и не смотря на это в физике, благодаря таким измерениям достигнуты поразительные успехи. Следовательно, таких же успехов может достичь и образование, если будет применять инструмент для количественного измерения хотя бы таких параметров, как уровень знания и трудность задания.

Согласно классической теории тестов наблюдаемая (измеряемая) оценка X состоит из истинного Т и ошибочного Е значений:

(1.2)

Здесь мы не станем рассматривать классы ошибок (систематические, случайные, грубые и др.), остановимся на задаче оценки неизвестного значения Т. Поскольку величины X и Е подчиняются нормальному закону распределения, то естественно предположить, что этот же закон определяет характер распределения значений Т. Последнее методом последовательных итераций путем определения истинных значений ошибок позволяет приблизиться к истинному значению Т с требуемой степенью точности.

Только в последние годы было понято принципиальное отличие педагогических измерений от физических, которое состоит в том, что результаты педагогических измерений зависят от взаимодействия двух основных факторов педагогического процесса – уровня знаний θ и трудности предъявляемых обучаемым заданий β. У одних и тех же испытуемых при относительно легких заданиях значения баллов получаются высокими, при трудных – низкими. Аналогично зависит и оценка трудности самих тестовых заданий: в сильной группе трудность этих заданий становится заниженной, а в слабой – завышенной. Проблема взаимосвязи указанных педагогических параметров была решена в 1952 году, когда математик Георг Раш предложил свою математическую модель для связи θ и β, которая в настоящее время методом латентного анализа позволяет определять и то и другое путем последовательных приближений.

Форма тестового задания

В настоящее время известны четыре формы тестовых заданий. Исследователи настойчиво пытаются найти новую пятую форму, не исключено, что будет изобретена и шестая.

Закрытая форма тестовых заданий

Закрытой является такая форма, когда дается несколько готовых правдоподобных ответов, только один из которых правильный. Закрытые задания разделяются на виды: задания с 2, 3, 4, 5 и большим числом ответов. Помимо этого, существует четыре принципа формирования ответов в закрытом тестовом задании: альтернативный, классификационный, кумуляционный и сочетательный.

Задание закрытой формы строится в виде утвердительного предложения, т.е. в виде высказывания, истинного или ложного. Задание представляется в виде законченного лаконичного предложения, оно должно быть коротким, четким и ясным, в основном содержать 7±2 слов, в нем не должно быть ни одного лишнего слова или знака. Понимаемость заданий должна быть 100 %.  Если хотя бы один испытуемый не понимает задание – оно плохое!

Задания в тесте должны иметь сплошную цифровую нумерацию. Ответы в заданиях закрытой формы также должны иметь цифровую нумерацию. Каждой группе заданий одинаковой формы должна предшествовать инструкция. Пример инструкции для закрытой формы: отвечать на эти задания сравнительно просто. Для этого в каждом задании надо обвести кружком номер правильного ответа.

По написанию само задание должно четко отличаться от ответов либо шрифтом, либо цветом (при возможности).

Задания с двумя ответами

Задания с двумя ответами выявляют, как тестируемые ориентируются в своем предмете, и нужны в качестве предварительного тестирования.

Задание № 2 — это пример фасетного задания. Это по сути два отдельных задания, которые одинаковы по содержанию и по трудности. Фасетные задания очень нужны, поскольку позволяют создавать несколько параллельных тестов, что очень важно, если преподаватель желает, чтобы испытуемый при тестирований не списывали друг у друга.

Задания с тремя ответами

Ответ "затрудняюсь ответить” не допускается при проверке знаний но точным наукам, но им можно пользоваться при оценке мнения. Задание № 10 представляет тот идеальный случай фасетированного задания, когда, меняя уравнение в задании, можно создать бесконечное множество параллельных заданий одного содержания и одинаковой трудности.

У альтернативных заданий с тремя (а также с четырьмя) ответами появляется одна замечательная особенность, которая позволяет в массе испытуемых выявить лиц, обладающих антизнаниями. Для этого вводят троичную шкалу оценок: +1 дают за правильный ответ, 0 – за неправильный, -1 – за антизнание. Например, в задании № 9 за первый ответ дается оценка -1, за второй – 0, за третий – +1. И на машине, и вручную легко вычислить суммарный отрицательный балл, т.е. выявить лиц с ярко выраженным стремлением к антизнанию и работать с ними по особым индивидуальным программам.

Задания с четырьмя ответами

Задания с большим количеством ответов

В заданиях этого типа таятся огромные возможности для сочетания различных принципов.

Следующий пример задания с восемью ответами составлен по принципу тройной альтернативы:

Принцип тройной альтернативы

№ 18. Формула  описывает число полос в мультиплете резонирующих ядер при n.

1. эквивалентных соседних ядер со спином 1/2
2. неэквивалентных соседних ядер со спином 1/2
3. неэквивалентных соседних ядер со спином у  >1/2
4. эквивалентных соседних ядер со спином  >1/2
5. эквивалентных резонирующих ядер со спином 1/2
6. эквивалентных резонирующих ядер со спином  >1/2
7. неэквивалентных резонирующих ядер со спином 1/2
8. неэквивалентных резонирующих ядер со спином  >1/2
   

В следующем примере задания из 10 ответов использовано сочетание принципов кумуляции и сочетания:

Задания открытой формы

Инструкция по выполнению заданий открытой формы может быть составлена в следующем варианте:

Задания на соответствие

Задания этой формы станут понятными из конкретных примеров. Инструкция к ним может быть предложена в следующем варианте:

Примеры заданий на соответствие:

В данном виде заданий необходимо установить соответствие между левыми и правыми элементами задания и ответ записать в виде правильной комбинации цифр и букв.

№ 23	Лидеры	Партии
	1. Ленин	А. Кадеты
	2. Мартов	Б. Эсеры
	3. Милюков	В. Меньшевики
	4. Плеханов	Г. Большевики

№ 24	Тип	Характер
	A. валентное	а. симметричное
	Б. деформацией	б. антисимметричное
	B. групповое	в. дважды вырожденное
	Г. комбинированное	г. трижды вырожденное

Ответ: 1 _ _, 2 _ _, 3 _ _

Задания на правильную последовательность

Задания этой формы очень важны для проверки у обучаемых различных навыков и умений. При помощи таких заданий можно, например, проверить порядок действия зубного врача при удалении зуба или пилота при той или другой аварии, порядок решения какой-то задачи или обработки детали на станке. При их помощи также – проверить очередность исторических событий или знание законов и определений. При их выполнении можно предложить следующий вариант инструкции:

При выполнении этой формы задания необходимо установить правильную последовательность выполняемых действий или слов в предложении. Для этого в клеточках необходимо поставить цифры, определяющие порядок слов или действий.

В заданиях этой формы каждое действие (событие) можно начинать с большой, можно с малой букв. Слова предложения, как в заданиях 26 и 27, – с малой. Начальное слово можно начинать с большой буквы, хотя это и является подсказкой.

Ситуационные тесты

Ситуационный тест – это не новая форма тестового задания, а целенаправленный набор тестовых заданий, предназначенными для разрешения всякого рода проблемных ситуаций, свойственных будущей профессии обучаемых. Длина теста может быть различна и зависит от количества решений (шагов), которые предстоит выполнить испытуемому при выходе из такой ситуации. Форма отдельных тестовых заданий в таком тесте также может быть различной, хотя, очевидно, можно воспользоваться и какой-нибудь одной формой. Здесь не приведен пример ситуационного теста, ибо он занял бы слишком много места. Но опытный педагог в состоянии его составить применительно к своей профессии, тем более, что такого рода тесты еще недостаточно разработаны и здесь для творческой личности непочатый край работы.

Ситуационный тест, по-видимому, не сможет выполнять обычную диагностическую функцию, поскольку тестовые задания в нем вряд ли целесообразно располагать в порядке возрастания их трудности. Порядок заданий будет определяться теми действиями, которые испытуемые должны предпринять для разрешения проблемной ситуации. Поэтому ситуационные тесты, скорее всего, должны выполнять обучающую функцию, приучая обучаемых к творческому поиску.

©  Н.М. Олейник. Фрагмент из учебного пособия по спецкурсу: "Тест как инструмент измерения уровня знаний и трудности заданий в современной технологии обучения. Донецкий государственный университет".