Использование тестирования для контроля знаний учащихся по информатике позволяет выявить уровень и качество знаний учащихся по определенному материалу, объективно оценить их независимо от учителя.

В данной статье рассматриваются типы и виды тестовых заданий; их особенности, преимущества и недостатки; требования, предъявляемые при составлении к тестовым заданиям; методика составления тестовых заданий по информатике и их применение на практике.

В самом общем виде тестовые задания должны:

• соответствовать содержанию учебного материала;
• быть составлены с учетом соответствующих правил;
• быть апробированы на практике;
• быть понятными испытуемому .

С помощью тестовых заданий можно измерять уровень и качество знаний учащихся по информатике. Тогда тестовые задания должны отвечать следующим требованиям:

• надежность – показывать те же результаты неоднократно, в схожих условиях;
• валидность – обнаруживать и измерять уровень усвоения именно тех знаний, которые хочет измерить разработчик теста;
• объективность .

С точки зрения разработчика минимальные требования к составу тестового задания состоят в наличии:

1. Инструкции (должна содержать указания на то, что испытуемый должен сделать, каким образом выполнить задание, где и как делать пометки и записи. Инструкция должна обеспечивать доступность задания и понимание способов его выполнения для любых испытуемых).

2. Текста задания или вопроса (представляет собой содержательное наполнение задания. Структура и состав вопроса определяются содержанием учебного материала).

3. Правильного ответа.

Перечисленные три составные части тестового задания являются минимально необходимыми для составления тестов.

Кроме того, составителям тестовых заданий целесообразно указывать еще ряд необходимых сведений, таких как:

• возраст (класс), на который рассчитано это задание;
• тему (предмет или предметную область);
• предполагаемое составителем время выполнения задания;
• сроки предъявления;
• уровень, который соответствует данному заданию, или умения, которые оно выясняет;
• соответствие стандарту или программному материалу;
• данные об авторе.

Виды и типы тестовых заданий. Их особенности, преимущества и недостатки

Рассмотрим, типологию тестовых заданий, и выделим требования к ним. Существуют два типа заданий, которые объединяют шесть видов .

Схема 1. Типы и виды тестовых заданий

К заданиям открытого типа относятся два вида – задания дополнения и задания свободного изложения. Их отличительной особенностью является то, что для их выполнения ученику необходимо записать одно или несколько слов (цифр, букв, словосочетаний, предложений).

Задания закрытого типа (альтернативных ответов, множественного выбора, восстановления соответствия и восстановления последовательности) предусматривают различные варианты ответа на поставленный вопрос: из ряда предлагаемых выбираются один или несколько правильных ответов, выбираются правильные (или неправильные) элементы списка и др. Эти задания предполагают наличие ряда предварительно разработанных вариантов ответа на заданный вопрос.

Задания закрытого типа

1. Задания альтернативных ответов.

К каждой задаче альтернативных ответов дается только два варианта ответов. Испытуемый должен выбрать один из них – “да – нет”, “правильно – неправильно” и др.

Форма задания

Текст задания (вопрос)
Утверждение 1	да	нет
Утверждение 2	да	нет
Утверждение 3	да	нет
...	...	...

Инструкция для задания альтернативных ответов: Вам необходимо выбрать один вариант ответа, который Вы считаете правильным.

Задания альтернативных ответов в большей степени подходят для выявления уровня овладения сложными определениями, знания достаточно сложных графиков, диаграмм, схем и др.

Особенностью заданий альтернативных ответов является то, что вопрос должен быть сформулирован в форме утверждения, поскольку он предполагает согласие или несогласие, которое можно отнести к утверждению.

Инструкция: Вам необходимо выбрать один вариант ответа, который Вы считаете правильным.

Вопрос: Программа Paint не является программой для работы с электронными таблицами.

Варианты ответов:

Ответ: да.

Эти альтернативные задания в наибольшей степени соответствуют задаче выявления того, в какой степени испытуемый понимает данные. Они могут содержать проверку умений работать с графиками, навыками приближенного вычисления. Любая другая форма представления заданий будет гораздо более громоздкой и менее удобной.

2. Задания множественного выбора.

Это основной вид заданий, применяемый в тестах достижений. Задачи с множественным выбором предполагают наличие вариативности в выборе. Испытуемый должен выбрать один из предложенных вариантов, среди которых чаще всего только один правильный.

Форма предоставления заданий множественного выбора:

Вопрос (утверждение):

A. Вариант ответа 1

B. Вариант ответа 2

C. Вариант ответа 3

Инструкция для заданий множественного выбора: Выберите букву (ы), соответствующую (не) варианту (ом) правильного (ых) ответа (ов).

Приведем несколько примеров:

Инструкция: Выберите букву, соответствующую варианту правильного ответа.

Вопрос: Для какой операции с таблицами служит окно, фрагмент которого представлен <Рисунок 1>:

Варианты ответов:

A. Суммирование по строкам.

B. Суммирование по столбцам.

C. Фильтрация таблицы.

D. Консолидация данных.

Инструкция: выберите буквы, соответствующие вариантам правильных ответов. Вопрос: Выберите из приведенного списка типы объектов, с которыми работает Access.

Варианты ответов:

A. Таблицы.

B. Сведения.

C. Запросы.

F. Отчеты.

G. Макросы.

Н. Модули.

Ответ: А, С, D, F, G, H.

3. Задания на восстановление соответствия.Новая таблица

К заданиям данного типа относятся задания на восстановление соответствия между элементами двух списков, порядка ряда.

Форма представления заданий на восстановление соответствия:

Инструкция:

Варианты ответа:

Инструкция: Соотнесите написанное в столбцах 1 и 2.

Вопрос: При создании таблицы СУБД можно использовать 5 возможностей. Выберите из приведенных определений те, которые им соответствуют <Рисунок 2>:

Варианты ответа.

Ответ: А. 3. В. 2. С. 5. D. 1. Е. 4.

Главными преимуществами заданий этого вида являются: возможностью быстрой оценки знаний, умений и навыков в конкретной области знаний, и экономичность размещения задач в тесте.

4. Задания на восстановление последовательности

Задания на восстановление последовательности можно рассматривать как вариант задания на восстановления соответствия, когда одним из рядов является время, расстояние, или иной континуальный конструкт, который подразумевается в виде ряда.

Задания на восстановление последовательности – это очень качественная форма тестовых заданий, обладающая значительными преимуществами: краткостью, простотой проверки.

Инструкция:

Варианты ответа.

Приведем несколько примеров:

Инструкция: Расположите в правильной последовательности.

Вопрос: Установите последовательность этапов проектирования экспертных систем.

Варианты ответов:

Столбец 1	Столбец 2
1	А. Выбор подходящей проблемы.
2	В. Доработка прототипа до промышленной экспертной системы.
3	С. Стыковка экспертной системы.
4	D. Разработка прототипа экспертной системы.
5	Е. Оценка экспертной системы.
6	F. Поддержка экспертной системы.

Ответ: 1. А. 2. D. 3. В. 4. Е. 5. С. 6. F.

Преимущества заданий закрытого типа

• Задания могут быть надежны, поскольку отсутствуют факторы, связанные с субъективными оценками, которые снижают надежность.
• Оценивание заданий полностью объективно: между оценками различных проверяющих не может быть различий.
• Не учитывается умение испытуемых хорошо формулировать ответы.
• Задания этого типа легко обрабатываются, тестирование быстро проводится.
• Простой алгоритм заполнения снижает количество случайных ошибок и описок.
• Эти задания позволяют охватить большие области знания, что для тестов достижений особенно важно.
• Возможна машинная обработка ответов.
• Низкая вероятность угадывания правильных ответов.
• Возможно получение точной оценки содержательности теста, что особенно важно для определения соответствия теста целям исследования .

Задания открытого типа

К ним относятся задания двух видов:

1) дополнения (задачи с ограничением на ответы). В этих заданиях испытуемые также самостоятельно давать ответы на вопросы, однако их возможности ограничены.

Ограничения обеспечивают объективность оценивания результата выполнения задания, а формулировка ответа должна дать возможность однозначного оценивания.

Инструкция для заданий дополнения: вместо многоточия впишите только одно слово (символ, знак и т.д.).

Пример задания дополнения.

Инструкция: Вместо многоточия впишите только одно слово.

Вопрос: Фирма, предоставляющая сетевые услуги – это...

Ответ: провайдер.

2) Свободного изложения или свободного конструирования. Они предполагают свободные ответы испытуемых по сути задания. На ответы не накладываются ограничения. Однако формулировки заданий должны обеспечивать наличие только одного правильного ответа.

Инструкция для заданий свободного изложения: закончите предложение (фразу), впишите вместо многоточия правильный ответ (словосочетание, фразу, предложение или несколько предложений).

Пример задания свободного изложения.

Инструкция: Закончите предложение.

Вопрос: Специальная программа, реализующая правила передачи информации между компьютерами – это... ...

Ответ: сетевой протокол.

Трудность в применении этого вида задач заключается в сложности с формализацией ответов, необходимость подготовки оценочных схем затрудняет стандартизацию, громоздкость процедуры и большие затраты времени на проведение.

Основная трудность при составлении заданий открытого типа – соблюдения основного требования к тестовым заданиям (наличия однозначного правильного ответа).

Положительными сторонами хорошо составленных заданий дополнения и свободного изложения являются:

1) невозможность угадать ответ;

2) краткость и однозначность ответов;

3) необходимость воспроизведения ответа по памяти;

4) отсутствие необходимости искать несколько вариантов ответа;

5) простота формулировки вопроса;

6) простота проверки .

Список используемой литературы

1. Лефрансуа Г. Прикладная педагогическая психология. – СПб.: ПРАЙМ ЕВРОЗНАК, 2003. – 416 с.

2. Майоров А.Н. Теория и практика создания тестов для системы образования. – М.: “Интеллект-центр”, 2001. – 296 с.

3. Пидкасистый П.И. Педагогика. Учебное пособие для педагогических вузов и педагогических колледжей. – М.: Педагогическое общество России, 1998. – 640 с.

4. Сластенин В.А. и др. Педагогика: Учеб. Пособие для студ. высш. пед. учеб. заведений / В.А. Сластенин, И.Ф. Исаев, Е.Н. Шиянов. – М.: Издательский центр “Академия”, 2003. – 576 с.

Структура и содержание КИМ КИМ по каждому предмету состоят из трёх частей - часть «А» - задания с выбором ответа из предложенных; - часть «В» - задания с кратким свободным ответом; - часть «С» - задания с развернутым свободным ответом (включает словесное обоснование или сочинение-рассуждение, решение или доказательство и т.п.)

Часть А - тип заданий В - с выбором ответа (уровень сложности – базовый "Б" и повышенный "П"); Часть В – тип заданий К - с кратким свободным ответом (в виде целого числа или числа, записанного в виде десятичной дроби, слова) (уровень сложности – повышенный "П"); Часть С - тип заданий Р - с полным развернутым ответом (с записью полного решения). (уровень сложности – высокий "В").

Задания с выбором одного или нескольких правильных ответов это простейший вид задания, в котором правильный ответ уже содержится, и задача испытуемого состоит в его узнавании Инструкции: 1. ОБВЕДИТЕ КРУЖКОМ НОМЕР ПРАВИЛЬНОГО ОТВЕТА: 2. ОБВЕДИТЕ КРУЖКОМ НОМЕРА ВСЕХ ПРАВИЛЬНЫХ ОТВЕТОВ: Содержательная основа задания: Задание представляет собой часть утвердительного предложения, но не вопрос. Предлагаемые варианты ответов дополняют его до полного утвердительного предложения. Задача испытуемого – выбрать правильный вариант утверждения

Форма В3 Задания, состоящие из вопроса (или предписания), перечня двух или более содержательных элементов для анализа и четырех вариантов ответа, из которых только один правильный. Ответы в данном задании включают один элемент из перечня, несколько элементов в разном сочетании или в ответе указывается, что все элементы являются правильными или ни один из них.

Пример: Верны ли следующие суждения о государстве? А. В любом государстве существует верховенство права. Б. В правовом государстве гражданин и власть ответственны друг перед другом. 1)верно только А 2)верно только Б 3)верны оба суждения 4)оба суждения неверны Ответ: 2

Пример: Что из перечисленного относилось к деятельности революционных народников? А) пропаганда среди крестьян Б) составление «Русской правды» В) увлечение теориями французского Просвещения Г) издание «Словаря иностранных слов» Д) увлечение теориями «общинного», «крестьянского» социализма Е) террор против правительственных чиновников и царя Укажите верный ответ. 1)Б Г Е 2)А В Д 3)А Д Е 4)Г Д Е Ответ: 3

Задания с кратким ответом на выбор нескольких правильных ответов из предложенного списка. Эти задания, как правило, оцениваются двумя баллами за полный правильный ответ. За частично правильный (с одной ошибкой) учащийся получает один балл. МНОЖЕСТВЕННЫЙ ВЫБОР

Пример: Папоротники относят к царству растений, так как А)в процессе дыхания они поглощают кислород и выделяют углекислый газ Б)в процессе фотосинтеза они образуют органические вещества и выделяют в атмосферу кислород В)их клетки содержат хлоропласты Г)их клетки содержат цитоплазму Д)выполняют роль консументов в экосистеме Е)выполняют роль продуцентов в экосистеме Ответ: ____________. (Запишите соответствующие буквы в алфавитном порядке.) Ответ: БВЕ

Пример: Установите соответствие между областями культуры и особенностями деятельности в этих областях: к каждой позиции, данной в первом столбце, подберите соответствующую позицию из второго столбца. Особенности деятельностиОбласти культуры 1стремление к достоверностиА)наука 2обоснованность предположенийВ)искусство 3субъективность 4образное отражение реальности Запишите в таблицу выбранные буквы, а затем получившуюся последовательность букв перенесите в бланк ответов (без пробелов и других символов) Ответ: ААББ

Э то более сложный тип задания в тестовой форме, в процессе выполнения которого испытуемый конструирует ответ из предложенной неупорядоченной последовательности слов - используются для проверки знаний хода процесса, цепочки событий, действий и операций, а также определений и понятий. - помогают формировать у учащихся алгоритмические мышление, знание и умение. - задания этой формы полезны как в качестве средства контроля знаний, так и в качестве средства обучения. ИНСТРУКЦИИ: Упорядочите: или Установите правильную последовательность:

Пример: Установите, в какой последовательности в пищевой цепи должны располагаться указанные организмы: А)лягушка Б)ёж В)голый слизень Г)капуста Запишите в таблицу буквы выбранных ответов, а затем перенесите в бланк ответов получившуюся последовательность букв (без пробелов и других символов). Ответ: ГВАБ

Задание открытой формы конструируется в виде утверждения, рядом с которым готовые ответы с выбором не приводятся. Испытуемый сам дописывает в отведенном для этого месте свой ответ так, чтобы в результате получилось истинное высказывание ИНСТРУКЦИЯ Дополните:

Задания открытого типа для проверки терминов КАК НАЗЫВАЕТСЯ ОТВЕТЫ: 1) ПРОЦЕСС ОТЫСКАНИЯ ПРОИЗВОДНОЙ ФУНКЦИИ _________________________ 2) (x 0,х n) ПО РЯДУ НАБЛЮДЕННЫХ ПАР ЗНАЧЕНИЙ (x 0, y 0), (x 1, y 1),…, (x n, y n) _________________________ 3) ФУНКЦИЯ, РАВНАЯ ОТНОШЕНИЮ ДВУХ ПОЛИНОМОВ _________________________ 4) ФУНКЦИЯ R=a 1 x 1 + a 2 x 2 +…+ a n x n, МАКСИМУМ ИЛИ МИНИМУМ КОТОРОЙ НАХОДИТСЯ ПРИ РЕШЕНИИ ЗАДАЧИ ЛИНЕЙНОГО ПРОГРАММИРОВАНИЯ _________________________

Пример: Электрический кипятильник рассчитан на напряжение 220 В. Сопротивление нагревательного элемента кипятильника 30 Ом. Какое количество энергии выделяется кипятильником при прохождении тока через нагревательный элемент в течение 5 минут? Ответ выразите в кДж. Ответ: 484

Задания с развернутым ответом Для проверки самых сложных умений (анализировать ситуацию, делать выводы, проводить логически и математически грамотные рассуждения, обоснования, доказательства своих действий и грамотно записывать их). Эти задания должны быть направлены на применение в новой ситуации знаний из различных разделов школьного курса. Их назначение заключается в выявлении выпускников, имеющих наиболее высокий уровень подготовки

НЕВЕРНО! Когда была Великая Отечественная война? ВЕРНО! Великая Отечественная война началась в... году 1) в 1941г.1)) в 1945г.2)) с 1941по1945 гг.3)) в 1943 г.4) 1945 ?

НЕВЕРНО! Ни 1942 год, ни 1943 год не является годом начала Великой Отечественной войны. Это... год ВЕРНО! Великая Отечественная война началась в... году 1)))) 1945 ?

4. В заданиях закрытого типа не должно быть заведомо ложных ответов, ответов, содержащих подсказку, а также явно выделяющихся, обособленных ответов. Все ответы должны быть приблизительно одной длины. Подсказок не должно быть и в тексте (формулировке) задания.

НЕВЕРНО! Дата начала Великой Отечественной войны... ВЕРНО! Дата начала Великой Отечественной войны... 1) 19411) 20 июля) 19452) 31 декабря) 22 июня 1941 года3) 22 июня) 19404) 11 января 1940 ?

НЕВЕРНО! Великая Отечественная война началась... ВЕРНО! Великая Отечественная война началась в... году 1) в 19411)) в 19422)) в 19433)) в 19454) 1945 ?

6. ТЗ должно быть однозначным. Однозначность (формальность) это искусство описания тестового суждения, когда нечеткость и неясность задания очевидна из исходных предпосылок для тестируемого, обладающего нужными знаниями. Например, не допускается обращение к субъективному мнению тестируемого.

НЕВЕРНО! Выберите из перечисленного ниже списка те возможности, которыми, по Вашему мнению, могут обладать современные системы управления базами данных: ВЕРНО! Возможности современных систем управления базами данных: 1) Поддержка языка SQL 2) Обеспечение целостности данных 3) Поддержка концептуальной модели 4) Поддержка семантических моделей?

НЕВЕРНО! Из сердца рыбы к органам тела идёт кровь ВЕРНО! Кровь, идущая из сердца рыбы к орга­нам тела называется.... 1) венозная 2) смешанная 3) артериальная 4) смешанная с преобладанием артериальной 1) венозная 2) смешанная 3) артериальная 4) смешанная с преобладанием артериальной?

10. Должно быть предусмотрено достаточное количество вариантов заключений. Для заданий закрытой формы рекомендуется 4-6 вариантов ответов для заданий на последовательность 4-8 элементов для заданий на соответствие наиболее оптимальным считается соответствие 3 к 4 или 3 к 5. В открытой форме должны быть предусмотрены все возможные образцы эталонных ответов.

11. ТЗ должно соответствовать содержанию ГОС или учебной программе. 12. ТЗ должно быть ясным и понятным по смыслу. Ясность смысла тестовой ситуации и представления ТЗ свидетельствует о том, что при конструировании тестовой ситуации ничего существенного не упущено, а исходные посылки и требование проблемной тестовой ситуации понятны для тестируемых с определенным уровнем обученности. 13. Тестовые задания должны иметь различную трудность (для более объективной оценки знаний).

14. ТЗ должно быть компактным и свернутым. Желательно использование рисунков, формул и других поясняющих объектов. При помощи графических объектов задание может быть представлено на экране более компактно и свернуто. Если выделить цветом главный элемент рисунка, то внимание тестируемого сразу будет акцентиро­вано на существенном признаке. 15. Среднее время решения ТЗ (трудность ТЗ) не должно превышать более 2-3 минут (оптимальное время для ответа на краткое суждение). Наиболее оптимальным считается, что на поиск правиль­ного ответа на ТЗ тестируемый потратит около одной минуты. Обобщённый набор требований к тестам краткость технологичность правильность формы корректность содержания логическая форма высказывания одинаковость правил оценки ответов наличие определенного места для ответов правильность расположения элементов задания одинаковость инструкции для всех испытуемых адекватность инструкции форме и содержанию задания

Приложение 3

Формы тестовых заданий (с вариантами представления ответов)

И требования по их составлению

Тестовые задания могут быть четырех типов:

1. Закрытое тестовое задание

2. Открытое тестовое задание

3. Тестовое задание на установление соответствия

4. Тестовое задание на установление правильной последовательности

1.ЗАКРЫТОЕ ТЕСТОВОЕ ЗАДАНИЕ – это задание на выбор правильного ответа (одного или нескольких) из предложенных вариантов. Задание формулируется в форме утверждения, которое обращается в истинное или ложное высказывание после подстановки одного из вариантов ответа.

· Задание формулируется предельно кратко (не более 250 символов, т.е. примерно четырех строк экранного текста). Каждый ответ в тестовом задании открытого типа должен содержать не более двух-трех строк экранного текста. Все ответы к одному заданию должны быть приблизительно одной длины.

Закрытое тестовое задание с одним вариантом ответа:

Фиксированная дань была установлена при …

а) князе Олеге

б) князе Игоре

В) княгине Ольге

г) князе Владимире

Закрытое тестовое задание с несколькими вариантами ответа:

Угроза русским землям в XIII в. исходила от …

а) Византии

б) Хазарии

В) немецких рыцарей

Г) шведских рыцарей

· Из текста задания необходимо исключать все ассоциации, способствующие выбору правильного ответа с помощью догадки.

· Тестовые задания закрытой формы должны содержать 3–10 (оптимально 4–6) вариантов ответов на каждый вопрос, в т.ч. минимум один правильный и минимум один ошибочный.

· Правильные варианты ответов на задания составитель теста должен выделить жирным шрифтом.

· Среди предложенных вариантов ответа может быть как один, так и несколько верных. Отсутствие верного ответа, как и отсутствие ошибочного – недопустимо.

· Тестовое задание не должно содержать повторов, двойных отрицаний и сленга, а также глаголов повелительного наклонения («выберите», «вычислите», «укажите» и т.д.).

· «… не …» (отрицательная форма) заменяется на «Неверно, что …» (утвердительная форма):

Неверно, что первой женщиной-космонавтом была …

а) В. Терешкова

Б) Е. Кондакова

В) С. Савицкая

Г) С. Райд

· Не допускается использование вариантов ответа: «все выше перечисленное верно» «верны варианты а), б) и в)», «все ответы верные» и «нет правильного ответа», так как подобные словосочетания невозможно подставить в текст задания.

· Нельзя начинать тестовое задание фразой типа «Из перечисленного ниже …», так как в этом случае невозможно с помощью подстановки ответа превратить текст задания в законченное утверждение.

· При составлении тестовых заданий следует избегать вводных фраз или предложений, имеющих мало связи с основной мыслью.

· Неправильные ответы должны быть умело подобраны, не должно быть очевидности их ошибочности (как ответ (В) «луна-парками»):

Территории, наиболее важные для сохранения разнообразия живой природы, называются …

А) экорегионами

б) экологическими парками

в) луна-парками

г) заповедниками

· Варианты ответов должны быть рядоположенными (не такими, как ответ (Г)):

Первый антимонопольный закон был принят в …

А) США

Б) России

В) Англии

Г) прошлом веке

· Необходимо, чтобы варианты ответов принципиально отличались друг от друга, а не были одинаковыми по сути, но изложенными другими словами.

2. ОТКРЫТОЕ ТЕСТОВОЕ ЗАДАНИЕ – это задание на дополнение предложенного текста пропущенным словом или словосочетанием. Составитель должен указать к данному заданию один короткий правильный ответ (слово или число) или конечное множество эталонных ответов, если возможно различное написание.

Ответ: 20 век; 20 в., XX век, XX в., двадцатый век

· Дополнение в тексте может быть только одно, его место обозначается тмноготочием {…}. Ответом является ключевой элемент содержания задания, знание которого является наиболее существенным для контролируемого материала.

Открытое тестовое задание:

Даровой принудительный труд зависимого крестьянства, работающего собственным инвентарем в хозяйстве феодала, – это …

Ответ: барщина

· Текст задания должен обладать предельно простой синтаксической конструкцией. В тексте задания не должно быть повторов и двойного отрицания.

3. ТЕСТОВОЕ ЗАДАНИЕ НА УСТАНОВЛЕНИЕ СООТВЕТСТВИЯ – это задание на определение связей между элементами, входящими в разные множества.

· Соответствие между элементами множеств должно быть однозначным, одному элементу первого множества должен соответствовать один элемент второго множества. Первое множество должно включать не менее 2 элементов, второе множество по количеству элементов должно быть больше (но не более чем в 2 раза) или равно первому множеству.

· Множества должны иметь разные нумерации: первое множество – арабскими цифрами со скобками, второе – русскими строчными буквами со скобками. Ответ оформляется жирным шрифтом в виде указания порядкового номера элемента первого множества вместе с порядковым номером соответствующего элемента второго множества.

Тестовое задание на установление соответствия:

Установите соответствие между именами политических лидеров страны и идеями, концепциями и программами этого периода:

1) Н.С. Хрущев

2) Л.И. Брежнев

3) Ю.В. Андропов

4) М.С. Горбачев

а) концепция развитого социализма

б) программа строительства коммунизма

в) концепция перестройки

г) концепция преодоления некоторых деформаций социализма путем укрепления дисциплины и порядка

д) концепция капитализма с человеческим лицом

е) концепция информационного общества

Ответ: 1б, 2а, 3г, 4в.

4. ТЕСТОВОЕ ЗАДАНИЕ НА УПОРЯДОЧИВАНИЕ – это задание на систематизацию предложенных элементов по какому-либо принципу (в основном, хронологическому).

· В тексте задания должен быть четко и кратко сформулирован критерий упорядочения элементов.

· Последовательность устанавливаемых объектов должна быть однозначной, не рекомендуется составлять последовательность, требующую повторения одного из объектов.

· Ответ оформляется жирным шрифтом в виде перечисления порядковых номеров элементов задания в нужной последовательности.

Тестовое задание на упорядочивание:

Московские государи правили в следующей последовательности:

2) Дмитрий Донской

4) Иван Калита

5) Василий III

Ответ: 4, 2, 3, 5, 1.

ПРАВИЛА ДОРАБОТКИ ТЕСТОВ.

В том случае, если Вы получили информацию о необходимости доработки какого-либо теста, необходимо следовать следующим правилам. Если Вы не получали тест на доработку от тестолога, необходимо запросить его конечный вариант в отделе контента. При получении теста, проверенного тестологом, необходимо проверить отредактированные элементы (набраны синим шрифтом) и, если смысл задания не искажен редактурой, снять выделение цветом и маркером с текста (это будет означать, что Вы согласны с редактурой). Задания, выделенные красным маркером, необходимо переделать, приведя их в соответствие с требованиями к составлению тестовых заданий, или удалить. Все замечания по необходимой переработке заданий приведены в фигурных скобках в конце «проблемных» заданий, а также выделены красным маркером. Внимание! Изменения необходимо вносить именно в присланный тестологом файл.

Приложение 1.

Правила оформления тестовых заданий

· Все задания оформляются обычным шрифтом (не курсивом, не жирным). Жирным шрифтом обозначаются правильные варианты ответов.

· Место для вставки ответа обозначается многоточием {…}

· Тестовое задание начинается с заглавной буквы, ответы – со строчной (кроме имен собственных, географических и административных названий, астрономических наименований и пр.)

Исключение: когда тестовое задание начинается с многоточия {…} для вставки ответа, тогда все ответы следует писать с заглавной буквы.

· При оформлении тестового задания закрытого типа в конце высказывания не ставятся точка, двоеточие или знак вопроса, допускаются только многоточие или отсутствие знаков препинания.

Угроза русским землям в XIII веке исходила от …

Угроза русским землям в … веке исходила от немецких и шведских рыцарей

· После вариантов ответа знаки препинания (запятые, точки с запятой, точки) не ставятся.

· В тестах для самопроверки должна быть сквозная нумерация заданий – от начала до конца теста (а не внутри каждой темы).

· В заданиях на установление соответствия множества должны иметь разные нумерации: первое множество нумеруется арабскими цифрами со скобками: 1) 2), второе – русскими строчными буквами со скобками: а) б).

· Задания нумеруются только с помощью автонумерации Word (не вручную).

· Ответы закрытого тестового задания нумеруются (вручную, без использования автонумерации Word), строчными русскими буквами со скобкой, в столбик (каждый ответ с красной строки):

· Ответ (ответы) открытого тестового задания приводится с красной строки, жирным шрифтом, в конце ставится точка:

Ответ: двенадцать, 12.

· Ответ тестового задания на установление соответствия оформляется жирным шрифтом в виде указания порядкового номера элемента первого множества вместе с порядковым номером соответствующего элемента второго множества. Ответ приводится в одну строку, с красной строки, жирным шрифтом, в конце ставится точка.

Ответ: 1 – а, б. 2 – в, г.

· Ответ тестового задания на упорядочивание приводится в одну строку, с красной строки, жирным шрифтом, в конце ставится точка.

Ответ: 4, 2, 3, 5, 1.

· Тестовые задания и варианты ответов не следует оформлять в форме таблиц.

· В рамках одного теста не должно быть повторов . Если текст Задания 2 идентичен тексту Задания 1, а варианты ответов Задания 2 более чем на 50 % совпадают с ответами Задания 1, то Задание 2 считается повтором и должно быть изменено.

Приложение 2.

Виды тестов, используемых в учебном процессе МФПУ «Синергия»

Виды тестов	Описание
Тест (в контексте данного документа) понимается как совокупность тестовых заданий, соответствующих Требованиям к составлению тестовых заданий Положения об учебно-методических комплексах. В приведенной ниже информации указано минимальное количество тестовых заданий. Максимальное количество не регламентировано. Выделение верных вариантов ответа жирным шрифтом обязательно.
Тест промежуточной аттестации (ПА)	Разделен на 2 части: Часть А, Часть Б. Тестовых заданий: Часть А - 30 (базис на оценку 3), Часть Б - 15 (на оценку 4). Доп. требования: В Части А задания только закрытой формы с одним вариантом ответа. Используется для проведения ЭЛАЗов в компьютерных классах Университета.
Контрольный тест к учебным материалам	Деления на части нет. Тестовых заданий: 30 Разрабатывается по предоставляемым учебным материалам (пока не разработан Интернет-курс или handbook). При соблюдении этого условия в качестве контрольного теста может быть использован тест ПА.
Тесты для самопроверки СПО	К каждой теме учебного пособия по 5 тестовых заданий.
Контрольный тест СПО	Деления на части нет. Тестовых заданий: 30. Доп. требования: Должен соответствовать учебным материалам для программы СПО.
Тесты для самопроверки в структуре интернет-курса	К каждой теме интернет-курса по 10 тестовых заданий.
Контрольный тест интернет-курса	Деления на части нет. Тестовых заданий: 50. Доп. требования: может быть составлен из тестов для самопроверки с добавлением 20% новых заданий. При создании может быть использован тест ПА, при условии, что информация для ответа на задания прямо или косвенно присутствует в интернет-курсе, и добавлении к тесту 5-10 заданий на оценку 5.
Тесты для самопроверки в структуре handbook	К каждой теме handbook по 5 тестовых заданий.
Контрольный тест handbook	Деления на части нет. Тестовых заданий: 30. Доп. требования: может быть составлен из тестов для самопроверки с добавлением 20% новых заданий. Является частью ЗИМа, задания итогового мероприятия. За выполнение теста предусматривается начисление 50 баллов, оставшиеся 50 баллов обучающиеся могут получить за выполнение другой часть ЗИМа – комплексного практического задания. Используется в основном для дистанционного обучения.

Приложение 3.

Примеры составления тестовых заданий с разбором типичных ошибок

		Правильный пример тестового задания
В XIII в. русские земли подверглись угрозе; эта угроза исходила от … а) Византии б) Хазарии в) немецких рыцарей г) шведских рыцарей	Тестовое задание должно представлять собой одну законченную мысль и содержать не более 250 символов (четырех строк экранного текста)	Угроза русским землям в XIII в. исходила от … а) Византии б) Хазарии в) немецких рыцарей г) шведских рыцарей
Как назывался даровой принудительный труд зависимого крестьянства, работающего собственным инвентарем в хозяйстве феодала? Ответ: барщина	Задание должно быть представлено в форме высказывания (недопустимо формулировать задание в виде вопроса, задачи, загадки и т.д.)	Даровой принудительный труд зависимого крестьянства, работающего собственным инвентарем в хозяйстве феодала, – это … Ответ: барщина
К социально-культурным факторам, оказывающим непосредственное влияние на покупательское поведение, безусловно, не могут не относиться следующие факторы:	Формулировка задания должна быть четкой, ясной и однозначной, не содержать повторов и двойных отрицаний	Социально-культурные факторы, оказывающие непосредственное влияние на покупательское поведение, – это …
Назовите правителя, при котором была установлена фиксированная дань. a) князь Олег б) князь Игорь в) княгиня Ольга г) князь Владимир	Задание должно быть представлено в виде предложения утвердительного, а не повелительного наклонения (правило относится к открытым и закрытым тестовым заданиям)	Фиксированная дань была установлена при … а) князе Олеге б) князе Игоре в) княгине Ольге г) князе Владимире

Ошибочный пример тестового задания	ТРЕБОВАНИЯ К СОСТАВЛЕНИЮ тестовых заданий	Правильный пример тестового задания
Государства Западной Европы в период классического средневековья существовали в форме … монархии а) раннефеодальная б) абсолютная в) конституционная г) сословно-представительная	Формулировки задания и ответов должны быть грамматически согласованы	Государства Западной Европы в период классического средневековья существовали в форме … монархии а) раннефеодальной б) абсолютной в) конституционной г) сословно-представительной
Фирма – это … а) организационная форма легализации бизнеса б) объект делового администрирования в) рабочее место профессионального предпринимателя г) все вышеперечисленное	Каждое задание должно иметь хотя бы один правильный ответ и хотя бы один неправильный, поэтому запрещены ответы: «Все вышеперечисленное» и «Ничего из вышеперечисленного». (правило относится к закрытым тестовым заданиям)	Фирма – это … а) организационная форма легализации бизнеса б) объект делового администрирования в) диверсифицированный бизнес г) рабочее место профессионального предпринимателя д) символ богатства
Первой женщиной-космонавтом была … а) В. Терешкова б) Ю. Гагарин в) А. Волков г) С. Райд	Формулировки задания и ответов не должны содержать «подсказок», чтобы не влиять на выбор ответа	Первой женщиной-космонавтом была … а) В. Терешкова б) Е. Кондакова в) С. Савицкая г) С. Райд
ЛФ, оказывающие неслабое влияние на покупательское поведение, – это …	Формулировки задания и ответов могут содержать только общепринятые аббревиатуры и не должны содержать сленга	Личностные факторы, оказывающие непосредственное влияние на покупательское поведение, – это …

	|	следующая лекция ==>

ВИДЫ ТЕСТОВ И ФОРМЫ ТЕСТОВЫХ ЗАДАНИЙ

План

1. Основные виды педагогических тестов.

2. Формы тестовых заданий.

3. Эмпирическая проверка и статистическая обработка результатов.

4. Принципы отбора содержания. Критерии оценки содержания теста.

5. Соотношение формы задания и вида проверяемых знаний, умений, навыков.

1. Осно вные виды педагогических тестов

Существуют два основных вида тестов: традиционные и нетрадиционные.

Тест обладает составом, целостностью и структурой. Он состоит из заданий, правил их применения, оценок за выполнение каждого задания и рекомендаций по интерпретации тестовых результатов. Целостность теста означает взаимосвязь заданий, их принадлежность общему измеряемому фактору. Каждое задание теста выполняет отведенную ему роль и потому ни одно из них не может быть изъято из теста без потери качества измерения. Структуру теста образует способ связи заданий между собой. В основном, это так называемая факторная структура, в которой каждое задание связано с другими через общее содержание и общую вариацию тестовых результатов.

Традиционный тест представляет собой единство, по меньшей мере, трех систем:

Формальной системы заданий возрастающей трудности;

Статистических характеристик заданий и результатов испытуемых.

Традиционный педагогический тест нужно рассматривать в двух существенных смыслах: - как метод педагогического измерения и как результат применения теста. Удивительно, что тексты на русском языке тяготеют к смыслу метода, в то время как в большинстве работ западных авторов понятие тест чаще рассматривается в смысле результатов. Между тем, оба эти смысла характеризуют тест с разных сторон, потому что тест надо понимать одновременно и как метод, и как результат педагогического измерения. Одно дополняет другое. Тест, как метод, не мыслится без результатов, подтверждающих качество его самого и качество оценок измерения испытуемых различного уровня подготовленности.

В приведенном выше определении традиционного теста получили развитие несколько идей.

Первая идея - тест рассматривается не как обычная совокупность или набор вопросов, задач и т.п., а в виде понятия "система заданий". Такую систему образует не всякая совокупность, а только та, которая обусловливает возникновение нового интегративного качества, отличающего тест от элементарного набора заданий и от других средств педагогического контроля. Из множества возможных систем наилучшую образует та целостная совокупность, в которой качество теста проявляется в сравнительно большей степени. Отсюда вытекает мысль о выделении первого из двух главных системообразующих факторов - наилучшего состава тестовых заданий, образующих целостность. Исходя из этого, можно дать одно из самых коротких определений: тест - это система заданий, образующих наилучшую методическую целостность. Целостность теста - это устойчивое взаимодействие заданий, образующих тест как развивающуюся систему.

Вторая идея состоит в том, что в данном определении теста совершен отход от укоренившейся традиции рассмотрения теста как простого средства проверки, пробы, испытания. Всякий тест включает в себя элемент испытания, он не сводится весь к нему. Ибо тест - это еще и концепция, содержание, форма, результаты и интерпретация - все, требующее обоснования. Этим подразумевается, что тест является качественным средством педагогического измерения. В соответствии с положениями теории, тестовые оценки не являются точными оценками испытуемых. Правильно говорить, что они лишь репрезентируют эти значения с некоторой точностью.

Третья идея, развиваемая в нашем определении традиционного теста - это включение нового понятия - эффективность теста, который ранее в литературе по тестам не рассматривался в качестве критерия анализа и создания тестов. Ведущая идея традиционного теста - минимумом числом заданий, за короткое время, быстро, качественно и с наименьшими затратами сравнить знания как можно большего числа учащихся.

По существу, этим отражается идея эффективности педагогической деятельности в области контроля знаний. Хотелось бы думать, что против самой этой идеи возражать уже некому и незачем. Если наш учитель может разъяснить учебный материал не хуже своего зарубежного коллеги, то хорошо проверить требуемые знания, у всех учеников, по всему изученному материалу, он не в состоянии из-за господствующей у нас классно-урочной системы занятий, нехватки компьютерной техники, тестов и программ для организации автоматизированного самоконтроля - самой гуманной формы контроля знаний. Не в состоянии он это делать и физически. В силу, мягко скажем, ошибочной социальной политики зарплата наших учителей уже давно не компенсирует затраты даже физической энергии, необходимой для хорошего преподавания, не говоря уже о повышенных затратах энергии интеллектуальной, что способно совершать только раскованное, а не озабоченное поисками хлеба мышление. Как отмечается в литературе, квалифицированный работник получает у нас в три-четыре раза меньше того уровня зарплаты, за границами которого нарушается нормальная жизнедеятельность и начинается разрушение трудового потенциала.

Хотя в литературе имеются сотни примеров определений теста, с которыми либо трудно, либо вообще нельзя согласиться, это совсем не означает, что данное определение традиционного теста - истина в последней инстанции. Как и все остальные понятия, оно нуждается в постоянном улучшении. Просто оно представляется автору пока более аргументированным, чем некоторые другие известные понятия педагогического теста. Впрочем, стремление к улучшению понятий - явление совершенно нормальное и необходимое для нормально развивающейся практики и науки. Конструктивные попытки дать другие определения теста или оспорить уже имеющиеся всегда полезны, но именно этого нам не достает.

К традиционным тестам относятся тесты гомогенные и гетерогенные. Гомогенный тест представляет собой систему заданий возрастающей трудности, специфической формы и определенного содержания - система, создаваемая с целью объективного, качественного, и эффективного метода оценки структуры и измерения уровня подготовленности учащихся по одной учебной дисциплине. Легко видеть, что в своей основе определение гомогенного теста совпадает с определением традиционного теста.

Гомогенные тесты распространены больше других. В педагогике они создаются для контроля знаний по одной учебной дисциплине или по одному разделу такой, например, объемной учебной дисциплины, как физика. В гомогенном педагогическом тесте не допускается использование заданий, выявляющих другие свойства. Наличие последних нарушает требование дисциплинарной чистоты педагогического теста. Ведь каждый тест измеряет что-то заранее определенное.

Например, тест по физике измеряет знания, умения, навыки и представления испытуемых в данной науке. Одна из трудностей такого измерения заключается в том, что физическое знание изрядно сопряжено с математическим. Поэтому в тесте по физике экспертно устанавливается уровень математических знаний, используемых при решении физических заданий. Превышение принятого уровня приводит к смещению результатов; по мере превышения последние все больше начинают зависеть не столько от знания физики, сколько от знания другой науки, математики. Другой важный аспект - стремление некоторых авторов включать в тесты не столько проверку знаний, сколько умение решать физические задачи, вовлекая, тем самым, интеллектуальный компонент в измерение подготовленности по физике.

Гетерогенный тест представляет собой систему заданий возрастающей трудности, специфической формы и определенного содержания - система, создаваемая с целью объективного, качественного, и эффективного метода оценки структуры и измерения уровня подготовленности учащихся по нескольким учебным дисциплинам. Нередко в такие тесты включаются и психологические задания для оценки уровня интеллектуального развития.

Обычно гетерогенные тесты используются для комплексной оценки выпускника школ, оценки личности при приеме на работу и для отбора наиболее подготовленных абитуриентов при приеме в вузы. Поскольку каждый гетерогенный тест состоит из гомогенных тестов, интерпретация результатов тестирования ведется по ответам на задания каждого теста (здесь они называются шкалами) и кроме того, посредством различных методов агрегирования баллов делаются попытки дать общую оценку подготовленности испытуемого.

Напомним, что традиционный тест представляет собой метод диагностики испытуемых, в котором они отвечают на одни задания, в одинаковое время, в одинаковых условиях и с одинаковой оценкой. При такой ориентации задачи определения точного объема и структуры освоенного учебного материала отступают, по необходимости, на задний план. В тест отбирается такое минимально достаточное количество заданий, которое позволяет сравнительно точно определить, образно говоря, не "кто что знает", а "кто знает больше". Интерпретация результатов тестирования ведется преимущественно на языке тестологии, с опорой на среднюю арифметическую, моду или медиану и на так называемые процентильные нормы, показывающие - сколько процентов испытуемых имеют тестовый результат хуже, чем у любого взятого для анализа испытуемого с его тестовым баллом. Такая интерпретация называется нормативно-ориентированной. Здесь вывод достраивается рейтингом: задания ответы выводы о знаниях испытуемого рейтинг, понимаемый как вывод о месте или ранге испытуемого.

Интегративные тесты. Интегративным можно назвать тест, состоящий из системы заданий, отвечающих требованиям интегративного содержания, тестовой формы, возрастающей трудности заданий, нацеленных на обобщенную итоговую диагностику подготовленности выпускника образовательного учреждения. Диагностика проводится посредством предъявления таких заданий, правильные ответы на которые требуют интегрированных (обобщенных, явно взаимосвязанных) знаний двух и большего числа учебных дисциплин. Создание таких тестов дается только тем преподавателям, которые владеют знаниями ряда учебных дисциплин, понимают важную роль межпредметных связей в обучении, способны создавать задания, правильные ответы на которые требуют от учащихся знаний различных дисциплин и умений применять такие знания.

Интегративному тестированию предшествует организация интегративного обучения. К сожалению, существующая сейчас классно-урочная форма проведения занятия, в сочетании с чрезмерным дроблением учебных дисциплин, вместе с традицией преподавания отдельных дисциплин (а не обобщенных курсов), ещё долго будут тормозить внедрение интегративного подхода в процессы обучения и контроля подготовленности. Преимущество интегративных тестов перед гетерогенными заключается в большей содержательной информативности каждого задания и в меньшем числе самих заданий. Потребность создания интегративных тестов возрастает по мере повышения уровня образования и числа изучаемых учебных дисциплин. Поэтому попытки создания таких тестов отмечаются, в основном, в высшей школе. Особенно полезны интегративные тесты для повышения объективности и эффективности проведения итоговой государственной аттестации учащихся и студентов.

Методика создания интегративных тестов сходна с методикой создания традиционных тестов, за исключением работы по определению содержания заданий. Для отбора содержания интегративных тестов использование экспертных методов является обязательным. Это связано с тем, что только эксперты могут определить адекватность содержания заданий целям теста. Но, прежде всего, самим экспертам важно будет определиться с целями образования и изучения тех или иных образовательных программ, а затем и договориться между собой по принципиальным вопросам, оставив для экспертизы лишь вариации в понимании степени значимости отдельных элементов в общей структуре подготовленности. Согласованный, по принципиальным вопросам, отобранный состав экспертов в зарубежной литературе нередко панелью. Или учитывая различия в смысле последнего слова, в русском языке, такой состав можно назвать представительной экспертной группой. Группа подбирается так, чтобы адекватно представлять подход, используемый при создании соответствующего теста.

Адаптивные тесты. Целесообразность адаптивного контроля вытекает из необходимости рационализации традиционного тестирования. Каждый учитель понимает, что хорошо подготовленному ученику нет необходимости давать легкие и очень легкие задания. Потому что слишком высока вероятность правильного решения. К тому же, легкие материалы не обладают заметным развивающим потенциалом. Симметрично, из-за высокой вероятности неправильного решения нет смысла давать трудные задания слабому ученику. Известно, что трудные и очень трудные задания снижают учебную мотивацию многих учащихся. Нужно было найти сопоставимую, в одной шкале, меру трудности заданий и меру уровня знаний. Эта мера была найдена в теории педагогических измерений. Датский математик Г. Раск назвал эту меру словом "логит". После появления компьютеров эта мера легла в основу методики адаптивного контроля знаний, где используются способы регулирования трудности и числа предъявляемых заданий, в зависимости от ответа учеников. При успешном ответе следующее задание ЭВМ подбирает более трудным, при неуспешном - легким. Естественно, этот алгоритм требует предварительного опробования всех заданий, определения их меры трудности, а также создания банка заданий и специальной программы.

Использование заданий, соответствующих уровню подготовленности, существенно повышает точность измерений и минимизирует время индивидуального тестирования до, примерно, 5 - 10 минут Адаптивное тестирование позволяет обеспечить компьютерную выдачу заданий на оптимальном, примерно 50%-ом уровне вероятности правильного ответа, для каждого ученика.

В западной литературе выделяется три варианта адаптивного тестирования. Первый называется пирамидальным тестированием. При отсутствии предварительных оценок всем испытуемым дается задание средней трудности и уже затем, в зависимости от ответа, каждому испытуемому дается задание легче или труднее; на каждом шаге полезно использовать правило деления шкалы трудности пополам. При втором варианте контроль начинается с любого желаемого, испытуемым, уровня трудности, с постепенным приближением к реальному уровню знаний. Третий вариант - когда тестирование проводится посредством банка заданий, разделенных по уровням трудности.

Таким образом, адаптивный тест представляет собой вариант автоматизированной системы тестирования, в которой заранее известны параметрами трудности и дифференцирующей способности каждого задания. Эта система создана в виде компьютерного банка заданий, упорядоченных в соответствии с интересующими характеристиками заданий. Самая главная характеристика заданий адаптивного теста - это уровень их трудности, полученный опытным путем, что означает: прежде чем попасть в банк, каждое задание проходит эмпирическую апробацию на достаточно большом числе типичных учащихся интересующего контингента. Слова "интересующего контингента" призвано представлять здесь смысл известного в науке понятия более строгого понятия "генеральная совокупность".

Распространенная у нас образовательная модель адаптивной школы Е.А. Ямбурга, исходит, по существу, из общих идей адаптивного обучения и адаптивного контроля знаний. Истоки такого подхода можно проследить с момента возникновения педагогических трудов Коменского, Песталоцци и Дистервега, которых объединяют идеи природосообразности и гуманности обучения. В центре их педагогических систем был Ученик. Например, в малоизвестной у нас работе А. Дистервега "Дидактические правила" можно прочитать такие слова: "Преподавай сообразно природе... Учи без пробелов... Начинай преподавание с того, на чем остановился ученик... Прежде чем приступить к преподаванию, нужно исследовать точку исхода... Без знания того, на чем остановился ученик, невозможно порядочно обучить его". Недостаточная информированность о реальном уровне знаний учеников и естественные различия в их способностях усвоить предлагаемые знания стали главной причиной появления адаптивных систем, основанных на принципе индивидуализации обучения. Этот принцип трудно реализуем в традиционной, классно-урочной форме.

До появления первых компьютеров наиболее известной системой, близкой к адаптивному обучению, была так называемая "Система полного усвоения знаний".

Критериально-ориентированные тесты. При критериально-ориентированном подходе создаются тесты для сопоставления учебных достижений каждого ученика с планируемым к усвоению объемом знаний, умений или навыков. В этом случае в качестве интерпретационной системы отсчета используется конкретная область содержания, а не та или иная выборка учеников. При этом упор делается на то, что может выполнить ученик и что он знает, а не на то, как он выглядит на фоне других.

Есть свои трудности и при критериально-ориентированном подходе. Как правило, они связаны с отбором содержания теста. В рамках критериально-ориентированного подхода в тесте стараются отразить все содержание контролируемого курса или, по крайней мере, то, что можно принять за этот полный объем. Процент правильного выполнения заданий рассматривают как уровень подготовки или как степень овладения общим объемом содержания курса. Конечно, в рамках критериально-ориентированного подхода для последней интерпретации есть все основания, так как тест включает все то, что можно условно принять за 100%.

Критериально-ориентированные тесты закрывают довольно широкий спектр задач. В частности, они помогают собрать полную и объективную информацию об учебных достижениях каждого учащегося в отдельности и группы учеников; сравнить зна-ния, умения и навыки ученика с требованиями, заложенными в государственных образовательных стандартах; отобрать учеников, достигших планируемого уровня подготовленности; оценить эффективность профессиональной деятельности отдельных преподавателей и групп преподавателей; оценить эффективность различных программ обучения.

Акцент на содержательном подходе может оказать благотворное влияние на педагогическое тестирование в целом. От такого подхода выигрывает, например, интерпретация тестовых баллов при текущем контроле. Ученик получает информацию не о том, как он выглядит на фоне других, а о том, что он может делать и что знает по сравнению с заданными требованиями к уровню подготовки по предмету. Разумеется, такая интерпретация не исключает сочетания с отнесением результатов к нормам, что, как правило, происходит при текущем контроле знаний учеников в повседневном учебном процессе. В этом случае тестирование интегрировано с обучением и помогает учащемуся выявить возможные затруднения, а также своевременно исправить ошибки в усвоении содержания учебного материала.

2. Формы т естовы х заданий

В современной тестологии (Аванесов В.С., Челышкова М.Б., Майоров А.Н. и др.) различают 4 типа заданий в тестовой форме: задания на выбор одного или нескольких правильных ответов, задания в открытой форме или на дополнение, задания на установление правильной последовательности и задания на установление соответствий. Наиболее распространенной является первая форма.

Рассмотрим подробно каждую форму заданий по классификации В.С. Аванесова.

Задания на выбор одного или нескольких правильных ответов для компьютерного контроля знаний подходят больше всего. Такие задания удобно разделить на следующие виды: задания с двумя, тремя, четырьмя пятью и большим числом ответов. Инструкцией для этой формы заданий служит предложение: «Обведите (отметьте, укажите) номер правильного ответа».

Пример 1. Отметьте номер правильного ответа.

Место, которое занимает цифра в записи числа, называют

1) позицией;

2) разрядом;

3) положением;

4) знакоместом.

Задание должно быть сформулировано кратко и четко, так, чтобы его смысл был понятен при первом прочтении.

Содержание задания формулируется как можно яснее и как можно короче. Краткость обеспечивается тщательным подбором слов, символов, графиков, позволяющих минимумом средств добиваться максимума ясности смысла задания. Необходимо полностью исключить повторы слов, использование малопонятных, редко употребляемых, а также неизвестных учащимся символов, иностранных слов, затрудняющих восприятие смысла. Хорошо, когда задание содержит не более одного придаточного предложения.

Для достижения краткости в каждом задании лучше спросить о чем-нибудь одном. Утяжеление заданий требованиями что-то найти, решить и затем еще и объяснить отрицательно сказываются на качестве задания, хотя с педагогической точки зрения легко понять причину такой формулировки.

Еще лучше, когда короткими являются и задание и ответ. Неправильный, но правдоподобный ответ в американской тестовой литературе называется словом дистрактор (от английского глагола tо distract - отвлекать). В общем случае, чем лучше подобраны дистракторы, тем лучше бывает и задание. Талант разработчика проявляется в первую очередь в разработке эффективных дистракторов. Обычно считают, что чем выше доля выбора неправильного ответа, тем он лучше сформулирован. Следует отметить, что это верно только до известного предела; в погоне за привлекательностью дистракторов нередко теряется чувство меры. Привлекательность каждого ответа проверяется эмпирически.

Задания с выбором одного или нескольких ответов являются самой критикуемой формой. Сторонники привычных подходов утверждают, что по-настоящему проверить знания можно только в процессе непосредственного общения с учеником, задавая ему уточняющие вопросы, что помогает лучше прояснить подлинную глубину, прочность и обоснованность знаний. С подобными утверждениями надо согласиться. Однако есть еще вопросы экономии живого труда учителей и учащихся, экономии временных затрат и проблемы повышения эффективности образовательного процесса.

Нередко считается, что найти правильный ответ гораздо легче, чем формулировать его самому. Однако в хорошо сделанных заданиях незнающему ученику неправильные ответы часто кажутся более правдоподобными, чем правильные. Талант разработчика теста раскрывается в процессе создания именно неправильных, но очень правдоподобных ответов. Другое возражение - что тестовое задание с выбором одного или нескольких правильных ответов годится только для оценки знаний так называемого низшего уровня.

Выделяется вариант заданий с выбором одного, наиболее правильного ответа из числа предложенных. Соответственно пишется и инструкция к таким заданиям: «Обвести номер наиболее правильного ответа». Естественно предполагается, что все остальные ответы к заданиям правильные, но в различной мере.

Существует три основания для введения таких заданий в практику.

Первое - это старая идея исключения из заданий неправильных ответов, которые слабые учащиеся могут, якобы, запомнить. Если следовать этому очень спорному тезису, то неправильные ответы при тестировании вообще давать нельзя.

Второе основание для введения таких заданий в практику более реалистично. Оно касается необходимости формировать у учащихся не только умения отличать правильные ответы от неправильных, но и умения дифференцировать меру правильности ответов. Это действительно важно, как в общем среднем, так и в высшем профессиональном образовании.

Третье основание для применения заданий с выбором наиболее правильного ответа - это стремление проверить с их помощью полноту знаний.

Сколь бы ни были убедительны основания для введения таких заданий в практику, последние вряд ли могут найти широкое применение.

В заданиях открытой формы готовые ответы не даются: их должен придумать или получить сам тестирующийся. Иногда вместо термина «задания открытой формы» используют термины: «задания на дополнение» или «задания с конструируемым ответом». Для открытой формы принято использовать инструкцию, состоящую из одного слова: «Дополните».

Пример 2. Дополните.

В двоичной системе счисления 10-1=_________.

Задания на дополнение бывают двух заметно отличающихся видов:

1) с ограничениями, налагаемыми на ответы, возможности получения которых соответствующим образом определены по содержанию и форме представления;

2) задания со свободно конструируемым ответом, в котором необходимо составить развернутый ответ в виде полного решения задачи или дать ответ в виде микросочинения.

В заданиях с ограничениями заранее определяется, что однозначно считать правильным ответом, и задается степень полноты представления ответа. Обычно он бывает достаточно кратким - одно слово, число, символ и т.д. Иногда - более длинным, но не превышающим двух-трех слов. Естественно, что регламентированная краткость ответов выдвигает определенные требования к сфере применения, поэтому задания первого вида в основном используются для оценки достаточно узкого круга умений.

Отличительная особенность заданий с ограничениями на дополняемые ответы заключается в том, что они должны порождать только один, запланированный разработчиком правильный ответ.

Задания второго типа со свободно конструируемым ответом не имеют никаких ограничений на содержание и форму представления ответов. За определенное время учащийся может писать что угодно и как угодно. Однако тщательная формулировка подобных заданий предполагает наличие эталона, в качестве которого обычно выступает наиболее правильный ответ с описывающими его характеристиками и признаками качества.

В заданиях на установление соответствия преподаватель проверяет знание связей между элементами двух множеств. Элементы для сопоставления записываются в два столбца: слева обычно приводятся элементы задающего множества, содержащие постановку проблемы, а справа - элементы, подлежащие выбору.

К заданиям дается стандартная инструкция: «Установите соответствие».

Пример 3. Установите соответствие

а) - _________________, б) - _____________, в) - _____________.

Следует отметить, что желательно, чтобы в правом столбце элементов было больше, чем в левом. В этой ситуации возникают определенные трудности, связанные с подбором правдоподобных избыточных элементов. Иногда на один элемент левого множества необходимо выбрать несколько правильных ответов из правого столбца. Кроме того, соответствия могут быть расширены на три и большее число множеств. Эффективность задания существенно снижается, если неправдоподобные варианты будут легко различаться даже незнающими учащимися.

Эффективность задания также снижается в тех случаях, когда число элементов в левом и правом столбцах одинаково и при установлении соответствия для последнего элемента слева просто не из чего выбирать. Последнее правильное или неправильное соответствие устанавливается автоматически благодаря последовательному исключению элементов для предыдущих соответствий.

Тестовые задания на установление правильной последовательности предназначены для оценки уровня владения последовательностью действий, процессов и т.п. В заданиях приводятся в произвольном, случайном порядке действия, процессы, элементы, связанные с определенной задачей. Стандартная инструкция к этим заданиям имеет вид: «Установите правильную последовательность действий».

Пример 4. Установите правильную последовательность

Команда полного ветвления на УАЯ имеет формат:

Иначе <серия 2>

То <серия 1>

Если <условие>

Задания на установление правильной последовательности получают доброжелательную поддержку у многих преподавателей, что объясняется важной ролью упорядоченного мышления и алгоритмов деятельности.

Цель введения таких заданий в учебный процесс - формирование алгоритмического мышления, алгоритмических знаний, умений и навыков.

Алгоритмическое мышление можно определить как интеллектуальную способность, проявляющуюся в определении наилучшей последовательности действий при решении учебных и практических задач. Характерные примеры проявления такого мышления - успешное выполнение различных заданий за короткое время, разработка самой эффективной программы для ЭВМ и т.п.

Выбор форм заданий определяется многими весьма противоречивыми факторами, в числе которых особенности содержания, цели тестирования, а также - специфика контингента испытуемых. Проверка проще при использовании заданий закрытой формы, однако, такие задания менее информативны. Задания открытой формы более информативны, но сложнее организовать их проверку. Еще более сложной задачей является создание компьютерных программ для проверки правильности ответов на такие задания. Это связано с богатством словарного запаса испытуемых (при ответе могут быть использованы синонимы), внимательностью (опечатки, несоответствие регистров) и т.п.

Для успешной ориентировки в формах заданий можно использовать специальную таблицу (см. таблицу 1) сопоставительного анализа заданий, предложенную М.Б. Челышковой.

По мнению разработчика, настоящая таблица носит сугубо ориентировочный характер, однако, ее использование может облегчить процесс подбора тестовых заданий различной формы для решения тех или иных диагностических задач.

Таблица 1

Сопоставительный анализ характеристик тестовых заданий

Характерист ики	Задания закрытой формы	Задания на дополнение	Задания на установление соответствия	Задания на установление последовательности
Проверка знания фактов
Применение знаний по образцу
Применение знаний в нестандартных ситуациях
Простота конструирования
Исключение угадывания	Не исключено	Исключено	Не исключено	Не исключено
Объективность оценки
Исключение описок
Возможность оригинального ответа

Соответствие заданий в тестовой форме требованиям педагогической корректности содержания и формы являются необходимыми, но недостаточными условиями для того, чтобы называть их тестовыми.

Превращение заданий в тестовой форме в тестовые задания начинается с момента статистической проверки каждого задания на наличие у них тестобразующих свойств.

3. Эмпирическая проверка и статистическая обработка результатов

Наличие достаточного числа тестовых заданий позволяет перейти к разработке теста как системы, обладающей целостностью, составом и структурой. На третьем этапе отбираются задания и создают тесты, повышаются качество и эффективность теста.

Целостность теста образует взаимосвязь ответов испытуемых на задания теста, наличие общего измеряемого фактора, влияющего на качество знаний.

Состав теста образует правильный подбор заданий, позволяющий минимально необходимым числом отобразить существенные элементы языковой компетентности испытуемых.

Уровень и структура знаний выявляются при анализе ответов каждого испытуемого на все задания теста. Чем больше правильных ответов, тем выше индивидуальный тестовый балл испытуемых. Обычно этот тестовый балл ассоциируется с понятием "уровень знаний" и проходит процедуру уточнения на основе той или иной модели педагогического измерения. Один и тот же уровень знаний может быть получен за счет ответов на различные задания. Например, в тесте из тридцати заданий испытуемый получил десять баллов. Эти баллы скорее всего, получены за счет правильных ответов на первые десять, сравнительно легких заданий. Присущую для такого случая последовательность единиц, а затем нулей можно назвать правильной структурой подготовленности испытуемого. Если же обнаруживается противоположная картина, когда испытуемый правильно отвечает на трудные задания и неправильно - на легкие, то это противоречит логике теста и потому такой профиль знаний можно назвать инвертированным. Он встречается редко, и чаще всего, по причине ошибочности теста, в котором задания расположены с нарушениями требования возрастающей трудности. При условии, что тест сделан правильно, каждый профиль свидетельствует о структуре знаний. Эту структуру можно назвать элементарной (поскольку есть еще факторные структуры, которые выявляются с помощью методов факторного анализа).

Для определения уровня структурированности подготовленности можно использовать коэффициент Л.Гутмана, ранее неточно называвшийся мерой «надежности теста».

r g = 1 -

где r g коэффициент структурированности;.

- - сумма ошибочных элементов индивидуальных структур, подсчитываемых в векторах-строках баллов испытуемых;

- N - число испытуемых;

- k - число заданий.

Уровень знаний в значительной степени зависит от личных усилий и способностей, в то время как структура знаний заметно зависит от правильной организации учебного процесса, от индивидуализации обучения, от мастерства педагога, от объективности контроля - в общем, от всего того, чего обычно не хватает. Путь к достижению этого идеала лежит через трудности создания качественных тестов.

Разработка тестов начинается с анализа содержания преподаваемых знаний и овладения принципами формулирования тестовых заданий. К сожалению, на тесты все еще смотрят как на средство, которое легко придумать, в то время как сильная сторона тестов - их эффективность, проистекающая из теоретической и эмпирической обоснованности.

На третьем этапе от разработчиков нового поколения тестов потребуется некоторая математико-статистическая подготовка, знания теории тестов. Теорию тестов можно определить как совокупность непротиворечивых понятий, форм, методов, аксиом, формул и утверждений, способствующих повышению эффективности и качества тестового процесса. Кроме того, может потребоваться и некоторый опыт применения методов многомерного статистического анализа, и опыт правильной интерпретации тестовых результатов.

Часто возникает вопрос: «Как поведут себя удаляемые задания в других группах испытуемых?» Ответ зависит от качества подбора групп, а точнее от статистического плана формирования выборочных совокупностей. Верный ответ на этот вопрос следует искать в смысле понятия «target group»; это множество испытуемых в генеральной совокупности, для которых предназначен разрабатываемый тест.

Соответственно, если задания проектируемого теста ведут себя неодинаково в разных группах, то это является, скорее всего, указанием на ошибки в формировании выборок испытуемых. Последние должны быть такими же однородными, как и испытуемые в целевой группе. На языке статистики это означает, что испытуемые в целевой и в экспериментальных группах должны принадлежать одной генеральной совокупности.

Логарифмические оценки, называемые логитами, таких, казалось бы, реально несопоставимых феноменов как уровень знаний испытуемого с уровнем трудности каждого задания, были использованы для непосредственного сопоставления уровня трудности с уровнем подготовленности испытуемого.

По мнению Беспалько В.П. и Татур Ю.Г., тестирование должно быть измерением качества усвоения знаний, умений и навыков. Сравнение правил выполнения задания (задачи), предложенного в тексте, с эталоном ответа позволяет определить коэффициент усвоения знаний (К us). Следует заметить, что, где А - число правильных ответов, а Р - число заданий в предлагаемых тестах.

Определение К us является операцией измерения качества усвоения знаний. К us поддается нормировке (0 < К us < 1), процедура же контроля усвоения легко автоматизируется. По коэффициенту судят о завершенности процесса обучения: если К us > 0,7, то процесс обучения можно считать завершенным. При усвоении знаний с К us ? 0,7 студент в профессиональной деятельности систематически совершает ошибки и неспособен к их исправлению из-за неумения их находить. Нижнюю допустимую границу окончания процесса обучения повышают до величины, необходимой с точки зрения безопасности деятельности.

4. Принципы отбора содержания. Критерии оценки содержания теста

При создании теста внимание разработчика, прежде всего, привлекают вопросы отбора содержания, которое можно определить как оптимальное отображение содержания учебной дисциплины в системе тестовых заданий. Требование оптимальности предполагает использование определенной методики отбора, включающей вопросы целеполагания, планирования и оценки качества содержания теста.

Этап целеполагания является наиболее трудным и вместе с тем наиболее важным: от результатов его выполнения в первую очередь зависит качество содержания теста. В процессе целеполагания преподавателю необходимо решить вопрос о том, какие результаты учеников он хочет оценить с помощью теста.

Основания для ошибок в выводах педагога далеко не всегда связаны с технологическими недостатками традиционных средств контроля. Иногда они обусловлены недоработками педагога на этапе целеполагания, когда центр тяжести проверки смещается на второстепенные цели обучения, а иногда этап целеполагания отсутствует вовсе, поскольку часть педагогов уверена в непогрешимости своего опыта и интуиции, особенно при условии многолетней работы в школе. Однако никакие даже очень совершенные методы контроля и никакой опыт не дадут оснований для надежных выводов о достижении целей обучения до тех пор, пока нет уверенности в правильной постановке целей контроля и в их правильном, несмещенном отображении в содержании теста.

При создании теста ставится задача отобразить в его содержании то главное, что должны знать ученики в результате обучения, поэтому ограничиться простым перечислением целей обучения нельзя. В тест хотелось бы включить все, но, к сожалению, это невозможно, поэтому часть целей приходится просто отбросить и не проверять степень их достижения учащимися. Для того чтобы не утратить самое главное, необходимо структурировать цели и ввести определенную иерархию в их взаимное расположение. Без сомнения, здесь нет и не может быть готовых общих рецептов, поскольку в каждой дисциплине свои приоритеты. К тому же отдельные цели заметно связаны между собой, и потому простого представления о системе целей как об упорядоченной совокупности без рассмотрения связей между элементами явно недостаточно.

После определения целей тестирования и их конкретизации необходимо разработать план и спецификацию теста.

При разработке плана делается примерная раскладка процентного соотношения содержания разделов и определяется необходимое число заданий, по каждому разделу дисциплины исходя из важности раздела и числа часов, отведенных на его изучение в программе.

Раскладку начинают с подсчета планируемого исходного числа заданий в тесте, которое затем в процессе работы над тестом будет неоднократно меняться в сторону увеличения или уменьшения. Обычно предельное число не превышает 60 - 80 заданий, поскольку время тестирования выбирают в пределах 1,5 - 2 ч., а на выполнение одного задания отводится в среднем не более 2 мин.

После выполнения первого шага по планированию содержания разрабатывается спецификация теста, в которой фиксируется структура, содержание проверки и процентное соотношение заданий в тесте. Иногда спецификацию делают в развернутой форме, содержащей указания на тип заданий, который будет использоваться для оценки достижений учащихся в соответствии с намеченными целями создания теста, время выполнения теста, число заданий, особенности проведения тестирования, которые могут повлиять на характеристики теста и т.д.

Спецификация в развернутой форме включает:

1) цель создания теста, обоснование выбора подхода к его созданию, описание возможных сфер применения теста;

2) перечень нормативных документов, используемых при планировании содержания теста;

3) описание общей структуры теста, включающее перечень субтестов (если они есть) с указанием подходов к их разработке;

4) количество заданий различной формы с указанием числа ответов к закрытым заданиям, общее число заданий в тесте;

5) число параллельных вариантов теста либо ссылку на кластер, содержащую число и номера заданий кластера;

7) рекомендуемое время выполнения теста, в том числе на каждый субтест, среднее время выполнения одного задания с учетом специфики формы;

8) соотношение заданий по различным разделам и видам учебной деятельности школьников;

10) охват требований стандартов (для аттестационных тестов);

11) перечень требований, не вошедших в тест (для аттестационных тестов);

12) рекомендуемую автором стратегию расположения заданий в тесте.

Знания и умения делятся таким образом:

А - знания понятий, определений, терминов;

В - знание законов и формул;

С - умение применять законы и формулы для решения задач;

D - умение интерпретировать результаты на графиках и схемах;

Е - умение проводить оценочные суждения.

Нередко устанавливаются следующие пропорции:

А - 10%, В - 20%, С - 30%, D - 30%, Е - 10%.

Помимо критериев, есть общие принципы, способствующие в определенной степени правильному отбору содержания тестов.

Принцип репрезентативности регламентирует не только полноту отображения, но и значимость содержательных элементов теста. Содержание заданий должно быть таким, чтобы по ответам на них можно было сделать вывод о знании или незнании всей программы проверяемого раздела или курса.

Принцип системности предполагает подбор содержательных элементов, отвечающих требованиям системности и связанных между собой обшей структурой знаний. При соблюдении принципа системности тест можно использовать для выявления не только объема знаний, но и для оценки качества структуры знаний учеников.

После отбора содержания теста начинается наиболее ответственный этап создания предтестовых заданий. Эта работа поручается обычно самым опытным преподавателям с большим стажем работы в школе. Однако для создания заданий одного опыта недостаточно. Необходимы также специальные знания по теории и методике разработки педагогических тестов, обеспечивающие профессиональный подход к созданию предтестовых заданий.

В.С. Аванесов выделил 3 критерия отбора содержания тестовых заданий:

1) определенность содержания теста;

2) непротиворечивость содержания заданий;

3) обоснованность содержания тестовых заданий.

1. Определенность содержания теста образует предмет педагогического измерения. В случае гомогенного теста возникает вопрос об уверенности в том, что все задания теста проверяют знания именно по определенной учебной дисциплине, а не по какой-то другой. Довольно часто случается так, что правильные ответы на некоторые задания требуют знаний не только интересующей дисциплины, но и ряда других, обычно смежных и предшествовавших учебных дисциплин. Близость и связанность которых затрудняет точное определение предметной принадлежности измеряемых знаний.

Например, в физических расчетах используется немало математических знаний и потому в систему физического знания обычно включается та математика, которая используется при решении физических задач. Неудача в математических расчетах порождает неудачу при ответах на задания физического теста. Отрицательный балл ставится, соответственно, за незнание физики, хотя испытуемый допустил ошибки математического толка. Если в такой тест включено много таких заданий, которые для правильного решения требуют не столько физических знаний, сколько умений выполнять усложненные расчеты, то это может быть примером неточно определенного содержания теста по физике. Чем меньше пересечение знаний одной учебной дисциплины со знаниями другой, тем определеннее выражается в тесте содержание учебной дисциплины. Определенность содержания требуется и во всех других тестах. В гетерогенном тесте это достигается посредством явного выделения заданий одной учебной дисциплины в отдельную шкалу. При этом нередко встречаются задания, хорошо работающие не только на одну, но и на две, три и даже большее число шкал.

Во всяком тестовом задании заранее определяется, что однозначно считается ответом на задание, с какой степенью полноты должен быть правильный ответ. Не допускается определение понятия через перечисление элементов, не входящих в него.

Заданий

Формы представления компьютерных тестовых

Компьютерный тест состоит из инструкций к тесту, параметров и тестовых заданий . Инструкция к тесту должна в краткой и понятной форме содержать информацию, которая поможет испытуемому правильно понять процедуру выполнения тестовых заданий. В инструкции указываются время выполнения каждого теста, последовательность выполнения тестовых заданий, система оценок, правила интерпретации результатов и т.п.

Каждое тестовое задание состоит из задания и вариантов ответов, один из которых является эталоном. Ответы тестируемого сравниваются с эталонами по каждому тестовому заданию, а затем в соответствии с целью тестирования, разработанной шкалой измерения интерпретируется результат тестирования.

По виду представления тестовые задания могут быть словесные и невербальные (графические: статические и мультимедийные).

Анализ педагогической литературы позволил выделить, следующие формы тестовых заданий:

· закрытая форма;

· открытая форма;

· на соответствие;

· на установление правильной последовательности.

Тестовое задание закрытой формы состоит из проблемной части, в которой формулируется задача (проблема), ответов, содержащих правильный ответ (эталон), и дистракторов. Дистрактор – это неверный, неправильный ответ в закрытом тестовом задании с выборочными ответами.

Проблемная часть тестового задания может быть написана как в вопросительной , так и утвердительной формах.

К закрытым тестовым заданиям относятся:

· задания с альтернативным выбором (дихотомические) ;

· задания с множественным выбором : с одним отрицательным или положительным правильным ответом; с множественными ответами (верно/неверно), расширенного выбора.

Закрытая форма тестовых заданий с альтернативным выбором (дихотомические). Тестовое задания с альтернативным выбором обычно содержит некоторое утверждение. Испытуемый должен оценить это утверждение как истинное или ложное и дать ответ: да/нет, верно/неверно, отметить правильное утверждение и т.п. При разработке альтернативных тестовых заданий используют различные виды конструирования ответов : противоречия, противоположности, однородности, кумуляции и т.п.

К недостаткам данной формытестового задания можно отнести высокую степень угадывания (50%); трудность формулировки утверждения, на которое можно дать недвусмысленный ответ. Для уменьшения высокой степени угадывания рекомендуется увеличить количество тестовых заданий в тесте. Примеры альтернативных (дихотомические) тестовых заданий приведены в Приложении А.

· в связи с необходимостью точной формулировки утверждения воздерживаться от использования таких слов, как все , каждый , всегда , никогда , иногда , часто и т.п., в которых обычно может содержаться двусмысленность или противоречие;

· во избежание упрощенных ответов да/нет разрабатывать задания в утвердительной форме;

· формулировать ответы к заданиям кратко и содержательно .

Эту форму тестового задания рекомендуют использовать для детальной проверки знаний и понимания конкретного учебного материала: достоверности/недостоверности фактов, явлений, процессов, определений; умений узнавать ранее усвоенную информацию при повторном ее предъявлении в виде готовых решений соответствующих вопросов и задач при самоконтроле в процессе самостоятельной познавательной деятельности студентов и текущем контроле. Примеры тестовых заданий альтернативной формы приведены в Приложении А.

Задания с множественным выбором. Тестовое задание с множественным выбором состоит из проблемной части, которая содержит утверждение или вопрос, и вариантов выбора, из которых тестируемые должны определить правильный ответ. Варианты выбора содержат несколько правдоподобных ответов (дистракторов ), что сокращает вероятность угадывания правильного ответа. Варианты выбора должны содержать только сравнимые понятия, имеющие в своем содержании общие существенные признаки, по которым их можно сравнивать. Правильный ответ может иметь как положительную, так и отрицательную формы. Рекомендуемое количество дистракторов ‑ не более пяти. Если ни один из тестируемых не выбрал дистрактор, этот дистрактор называется нерабочим. Такой дистрактор заменяют.

Тестовые задания множественного выбора должны оценивать как объем знаний, имеющийся у тестируемого, так и его умение применять эти знания. Следующая пара условий тестовых заданий показывает различие между вопросом, оценивающим опознание отдельного факта, и вопросом, оценивающим применение знаний.

Условие задания на распознание : «Перечислите, какой вид деятельности можно оценить с помощью тестового задания закрытой формы множественного выбора ».

Условие задания на применение знания : «Необходимо разработать тестовые задания для объективной оценки деятельности на различие. Какую форму тестовых заданий эффективнее использовать в данном случае? ».

Тестовые задания с множественным выбором подразделяются на следующие виды:

· тестовые задания с множественным выбором, в котором содержится только один правильный ответ. Расположение правильного ответа в списке вариантов выбора должно определяться случайным образом, чтобы предотвратить случаи угадывания;

· тестовые задания множественного выбора, содержащие несколько вариантов выбора правильных ответов. Вероятность угадывания правильных ответов в таких заданиях уменьшается по сравнению с тестовыми заданиями, содержащими один правильный вариант выбора;

· тестовые задания расширенного выбора – это вопросы множественного выбора, организованные в блоки, которые используют единый список вариантов ответа для всех тестовых заданий в блоке. Задания расширенного выбора включают в себя тему, список вариантов ответа (перечисленных в алфавитном или логическом порядке), вводный вопрос (указывает на отношение между условием задания и вариантами ответа, проясняя вопрос, поставленный перед тестируемым), условие или ситуацию, по меньшей мере, двух тестовых заданий (сходных по структуре), как это показано в заданиях 16, 17 Приложения А . В этой форме тестовых заданий сначала определяются тема (1), вводный вопрос (2), варианты ответов (3), а условие задания (4) определяется в последнюю очередь. Варианты ответов в задании должны быть короткими, не содержать глаголов и быть однородными, в задании обязательно наличие вводного вопроса.

Задания с множественным выбором имеют следующие преимущества : высокая надежность, особенно с вариантом, когда используется один ответ; легкость обработки показателей теста при большом количестве заданий; возможность получения точных показателей теста для определения соответствия теста цели, для которой он был создан.

Простота. Задание должно быть написано настолько просто, насколько это возможно для его точного понимания. Нежелательно, чтобы на результаты оказывали влияние уровень словарного запаса испытуемого или его общие способности.

Все дистракторы должны быть такими, чтобы каждый из них мог привлечь внимание испытуемых (т.е. быть как бы «похожими» на правильный ответ). Дистрактор должен быть содержательным, по возможности правдоподобным, но не абсурдным.

Необходимо подбирать ответы таким образом , чтобы выбор был затруднен простым перебором без привлечения знаний, усвоение которых требуется оценить.

Только один вариант из предложенного набора должен соответствовать правильному ответу. Иногда различные взгляды на одну и ту же проблему могут привести к непредусмотренному ответу, который будет тоже правильным.

Ответ на один вопрос не должен давать ключа к ответам на другие. Не следует использовать дистракторы из одного задания в перечне других.

Избегайте тестировать тривиальное ввиду простоты его обнаружения. Сама проблема должна содержаться в основной части задания, а не выноситься в часть с вариантами выбора, которые должны быть настолько краткими, насколько это возможно.

Не рекомендуется использовать отрицательную форму формулировки проблемы. Ее использование может привести к противоречиям при чтении задания и, за исключением редких случаев, отрицательные значения не настолько важны, как положительные.

Использование выражения «ни один из перечисленных» в качестве дистрактора допустимо только тогда, когда существует недвусмысленный правильный ответ.

Использование выражения «все перечисленные» в качестве дистрактора приводит к допустимости «скользких» мест в формулировке заданий, в которых дистракторы не являются особенно дискриминативными, поскольку автор вопросов знает, что любой из ответов правильный.

Правильные ответы и дистракторы должны иметь одно содержание, одну структуру и общее количество слов. Расположение правильного ответа не должно повторяться от вопроса к вопросу, его место – случайно .