Знакомство с теорией тестов

Тестовое задание

разработки и применения тестов

целью выявления специальных способностей учащихся; измерения уровня знаний; оценивания результатов,

достигнутых ими в процессе обучения; определения их профессиональной пригодности, различных личностных характеристик и удовлетворяющая следующим требованиям содержательного характера:
возрастающая трудность заданий
соответствие содержания этой системы заданий содержанию учебного материала
научная достоверность
вариативность

требованиям:
одинаковость инструкции для всех испытуемых и ее адекватность форме

и содержанию задания
одинаковость правил оценивания
правильность формы задания
логическая правильность содержания задания
удовлетворение аксиоме локальной независимости
краткость формулирования содержания задания
наличие единственного правильного ответа

частей (порядок расположения элементов задания важен):
инструкция для тестируемого
текст

задания
варианты предполагаемых ответов (если они есть)
правильный ответ (присутствует лишь на этапе проектирования)

может использоваться в качестве средства обучения и контроля знаний

на установление соответствия
Задания на установление правильной последовательности

одного правильного ответа
Задания с выбором нескольких правильных ответов

ответов
Задания с четырьмя вариантами ответов
Задания с пятью и

более вариантами ответов

Среди заданий с выбором ответов выделяют:

кумуляции
сочетания
градуирования
удвоенной противоположности

в вопросе следует избегать слов, дающих возможность учащимся догадаться о

правильном ответе (например, слова “иногда”, “обычно” подталкивают к ответу)
вопрос должен быть четко сформулирован, избегая слов “большой”, “небольшой”, “малый”, “много”, “мало”, “меньше”, “больше” и т. д.
чаще использовать количественные термины
избегать вводных фраз или предложений, мало связанных с основной мыслью
не следует прибегать к пространным выражениям, т. к. они приводят к правильному ответу, даже если учащийся его не знает

ли вы, что...”), особенно использовать их многократно в одном предложении

не следует задавать вопросы с подвохом
необходимо избегать двусмысленных утверждений

высокая вероятность угадывания правильного ответа
быстрое "рассекречивание"

свободного изложения

подряд
дополнять нужно наиболее важное — то, знание чего нужно

проверить
дополнения лучше ставить в конце предложения
задание должно быть сформулировано четко
таким же четким и однозначным должен быть ответ
следует чаще пользоваться количественными величинами

вариантов ответа

о знаниях и умениях учащихся
трудности формулировки заданий — невозможность

иметь один ответ на многие вопросы
трудность в формулировке вопросов, требующих сопоставления, сравнения, анализа
невозможность использовать технические средства для обработки

левом столбцах. Рекомендуется, чтобы число элементов правого столбца было примерно

в 2 р. больше числа элементов левого столбца
Создаются для проверки знаний взаимосвязи определений и фактов, авторов и их произведений, формы и содержания, сущности и явлений

последовательностью действий, процессов, операций, суждений, вычислений.
Эти задания созданы для проверки

владения последовательностью действий, процессов, операций, суждений, вычислений.

пригодности, достижений
Бланковые, предметные, аппаратурные, практические, компьютерные
Индивидуальные, групповые
Устные,

письменные
Скорости, мощности, смешанные
Гомогенные, гетерогенные
Вербальные, невербальные
Интеллекта, личностные, достижений
Нормированные, ненормированные

на основе которого будем строить тестовые задания.
Формулирование списка требований

к знаниям и умениям учащихся.
Выделение основных понятий и построение графа взаимосвязи понятий.
Разработка заданий в тестовой форме.
Превращение заданий в тестовой форме в тестовые задания.
Получение набора тестовых заданий.
Формирование из тестовых заданий псевдотеста.
Проведение полученного псевдотеста.
Интерпретация результатов тестирования и статистическая обработка результатов псевдотеста.
Получение из псевдотеста теста.
Статистическая оценка качества полученного теста и тестовых заданий.

насколько точно измеряет данный тест изучаемое явление, его “помехоустойчивость”
Надежность характеризует

точность теста как измерительного инструмента, устойчивость его к действию помех (состоянию испытуемых, их отношения к процедуре тестирования и т.д.)

формой теста)
расщепление (метод деления целого на части)

объективной реальности

валидность
валидность по критерию (критериальная или эмпирическая валидность)
сравнительная

или конкурентная валидность

компьютера.

обеспечение комфортных условий для работы над тестом в удобное для

тестируемого время;
повышение мотивации, так как тестирование на компьютере интереснее и привлекательнее, чем на бумаге;
уменьшение числа посторонних факторов, негативно влияющих на достоверность результатов тестирования;
повышение эффективности тестирования за счет уменьшения продолжительности теста и использования новых типов заданий, позволяющих оценить не только знания тестируемого, но и его умение применять их на практике;

повышение информационной безопасности, поскольку случайная перестановка заданий в тесте

или ответов в задании делают невозможным для тестируемого “механическое” копирование номеров правильных ответов;
доступность результатов тестирования сразу после окончания тестирования;
повышение эффективности работы экспертов, проверяющих выполнение тестов на компьютере или через Интернет.

использования обоих вариантов;
влияние на результаты тестирования перехода от

буклета, бумаги и ручки к монитору, клавиатуре и мышке;
изменение процедуры и тактики выполнения теста (например, адаптивный алгоритм не позволяет вернуться к пропущенным заданиям);
обучение технического персонала и оснащение компьютерных классов необходимым аппаратным и программным обеспечением;
безопасность продолжительной работы на компьютере для здоровья каждого тестируемого;
готовность и желание тестируемых выполнять тест на компьютере (возможность выбора бумажного варианта);

высокая стоимость организации и проведения компьютерного тестирования. 

и адаптивного тестирования (АСТ-тест);
автоматизированная интерактивная система сетевого тестирования (АИССТ),

разработанная в Оренбургском государственном университете;
система компьютерного тестирования ЛАТ, разработанная в лаборатории аттестационных технологий Московского института повышения квалификации работников образования (ЛАТ МИПКРО);

проведения тестирования и обработки результатов тестирования;
инструментальная система для создания

компьютерных контролирующих программ “ЛИТО-Тесты”, разработанная в лаборатории информационных технологий обучения ЦМО МГУ;
универсальная система тестирования на основе экспертной системы «Виртуальный клон», созданная в лаборатории технологий и методических основ дистанционного обучения Тульского государственного университета;
универсальная система автоматизированного тестирования и контроля (УСАТИК), разработанная в Ульяновском государственном техническом университете.

VeralTest;
Vesta.

правила своей работы и порядок ответа на вопросы.
Выставлять оценку по

окончанию тестирования.
Демонстрировать задания, в которых допущена ошибка.
Допускать завершение тестирования при любом количестве выполненных заданий с выставлением оценки.

с заданиями, из которой они выбираются случайным образом).
Она должна быть

простой и удобной в эксплуатации.
Ограничивать время (фиксировать время ответа на каждый вопрос и, если необходимо, прерывать процесс).
Адекватно оценивать испытуемого (корректировать его балл).
Она может быть легко обновлена т.е. допускает быстрое и удобное добавление новых заданий.

отвечающими в реальном режиме времени (режим мониторинга).
Она должна работать в

сетевом варианте.
Должна отображать OLE-объекты.
Должна вести учет пользователей.
По окончанию тестирования должна составлять сводные ведомости.