Создание тестовых заданий при организации

дистанционного обученияМАОУ лицей № 102

г. Челябинска

Эффективный тест

Эффективным является такой тест, который«лучше, чем другие тесты, измеряет знания обучающихся интересующего уровня подготовленности, с меньшим числом заданий, качественнее, быстрее, и все это – по возможности одновременно» В.С. Аванесов

Тест (в пер. с англ. – проверка, испытание)

– это инструмент, предназначенный для оценивания качестви свойств личности, которые могут быть изменены в процессе обучения, и состоящий из

квалиметрически выверенной системы тестовых заданий

стандартизованных процедур предъявления заданий обработки и анализа результатов

Педагогический тест

Это система заданий специфической формы,позволяющая измерить уровень обученности студентов, совокупность их представлений, знаний и навыковна той или иной области содержания

Тест состоит не из вопросов и задач,

а из тестовых заданий!

Специфическая форма тестовых заданий отличается тем, что задания теста представляют собойне вопросы и не задачи, а задания, сформулированные в форме высказываний, истинных или ложных, в зависимости от ответов.

Традиционные вопросы, напротив, истинными или ложнымине бывают, а ответы на них нередко настолько неопределенныи многословны, что для выявления их правильности требуются заметные, в суммарном исчислении, затраты интеллектуальной энергии преподавателей.

В этом смысле традиционные вопросы и ответы нетехнологичныи поэтому их лучше не включать в тест.

В.С.Аванесов

NB!

Достоверность и ошибки контроля*

Источники ошибки:

Вероятность положительного результата при неосвоении материала (верный ответ при отсутствии знания = угадывание)

Вероятность отрицательного результата при освоении материала (неверный ответ при наличии знания = ошибка при составлении задания)

Достоверность контроля (вероятность истинности результата)

Р ист. = 1 – Р угад. – Р ош.задан

*Из презентации к вебинару проф. Ю.В. Тихомирова (МГТУГА)«Компьютерное тестирование уровня освоения учебного материала» 11.05.2010, e-LearningPRO

Вероятность угадывания правильных ответов

1.Зависит от формы представления тестового здания (ТЗ):

в ТЗ закрытой формы – обратно пропорциональна количеству вариантов ответов

в ТЗ на упорядочение списка или конструирование ответа – стремится к нулю

В ТЗ открытой формы – стремится к нулю

2.Может быть обусловлена некорректной формулировкой ТЗ (подсказки)

Формы тестовых заданий

Закрытая

- одиночный выбор

- множественный выбор

- альтернативные задания

Открытая

На установление соответствия

На установление правильной последовательности

Одни и те же задания могут быть представленыв различных формах. Следует выбирать ту из них,в которой вопрос формулируется более краткои понятно, а вероятность угадывания правильных ответов меньше

Если задания в различных формах выглядят в равной степени эффективными, то следует выбирать из них тот тип, который менее всего представлен в тесте

NB!

Этапы подготовки банка ТЗ

1. Определение структуры учебной дисциплины

2. Отбор содержания учебного материала

3. Формулировка тестовых заданий (ТЗ)

4. Экспертиза качества ТЗ

5. Определение целей тестирования

6. Конструирование технологической матрицы и ее экспертиза

7. Построение выборки для предварительного испытания теста

8. Апробация теста и изучение результатов

9. Стандартизация теста

10. Подготовка учебных материалов для публикации

Основы e-learning для преподавателя вуза

Составление тестовых заданий для компьютерного тестирования в соответствии с требованиямипозволяет снизить вероятность ошибки

при тестовом контролеи повысить достоверность результата

NB!

Требования к составлению тестовых заданий для компьютерного

тестирования

Официально утвержденных Министерством образования

стандартных требований к составлению тестовых заданий на сегодняшний день нет

Приказ МО РФ от 17.04.2000 1122 «О сертификации качества педагогических тестовых материалов»

Рассматриваемые далее Требования*- разработаны сотрудниками Центра образовательных

коммуникаций и тестирования профессионального образования (ЦОКиТПО) МГУП (http://ctve.ru)

- носят рекомендательный характер - обусловлены спецификой компьютерного тестирования

*Источник: Васильев В.И., Киринюк А.А., Тягунова Т.Н. Требования к программно-дидактическим тестовым материалам и технологиям компьютерного тестирования. М.: Изд-во МГУП, 2005.

Специфика ТЗ для компьютерного тестирования

Объём текста ТЗ должен быть примерно на 30% меньше аналогичного по содержанию ТЗ для бланочного тестирования

Задание должно быть составлено с учетом того, что среднее время его предъявления на экране составляет около одной минуты

Заповедь №1для разработчика тестов

Думать не только о содержании тестового задания, но и о том, сколько времени студент потратитна его восприятие

Его важнейшая обязанность – экономия драгоценного времени обучающегося

Требования к составлению тестовых заданий

для компьютерного тестирования

Краткость и логичность суждения

Однозначность заключения

Повествовательная форма логического высказывания

Грамматическая согласованность частей ТЗ

Узнаваемость формы ТЗ

• Отсутствие: – прямых или скрытых подсказок– заведомо ложных, а также явно выделяющихся ответов – вводных слов и предложений– слов, в которых содержится двусмысленность

или противоречие– отрицания в формулировке ТЗ– повторов

• Лучше «длинный» вопрос и «короткие» ответы,чем наоборот

Требования к составлению тестовых заданий

для компьютерного тестирования

• Недопустимо:- использовать ответы типа: все

вышеперечисленное верно, все указанные ответы неверны и т.д.

- начинать формулировку с предлога, частицы, союза

- использовать повелительное наклонение (выберите, вычислите, укажите и т.д.)

• Рекомендуется:- при составлении ТЗ из возможных

формулировок выбрать ту, в которой количество слов наименьшее

Требования к составлению тестовых заданий

для компьютерного тестирования

NB!

Чем лаконичнее задание,тем лучше оно воспринимается!

• «Лишние» слова, не несущие смысловой нагрузки, должны быть из ТЗ удалены

• На первое место в формулировке необходимо выносить ключевое слово, в котором содержится основной смысл задания

Основные показатели качества тестовых заданий при экспертизе

1. Компактность формулировки ТЗ и вариантов ответов2. Логичность (формулировка ТЗ в виде суждения)3. Корректность (отсутствие лишних слов)4. Достаточность (необходимое количество вариантов

ответов)5. Содержательность (соответствие ТЗ содержанию ГОС

или учебной программе)6. Значимость (уровень значимости содержания ТЗ)7. Время вывода заключения(ответа)8. Однозначность ТЗ9. Ясность смысла тестовой ситуации

Примерынаиболее типичных

ошибокпри составлении

тестовых заданий

1. Формулировка задания в форме вопроса

НЕПРАВИЛЬНО ПРАВИЛЬНО

Что из перечисленного является видом таможенного режима?

Вид таможенного режима:

+переработка на таможенной территориитранзитсвободная таможенная зона

+переработка на таможенной территориитранзитсвободная таможенная зона

Предложите Ваш вариант корректной формулировки задания:

Что является одной из ключевых функций управления:+планированиепроизводствосбытснабжение

ПРАВИЛЬНО:Ключевая функция управления:+планированиепроизводствосбытснабжение

Предложите Ваш вариант корректной формулировки задания:

Какой из перечисленных источников права является основным в странах англосаксонской правовой системы?нормативный правовой актправовой обычай+юридический прецедент

ПРАВИЛЬНО:Основной источник права в странах англосаксонской правовой системы:нормативный правовой актправовой обычай+юридический прецедент

2. Повторяющиеся слова или словосочетания

НЕПРАВИЛЬНО ПРАВИЛЬНО

Функция общей полезности достигает максимума когда:

Функция общей полезности достигает максимума, когда предельная полезность:

+предельная полезность равна нулюпредельная полезность равна наибольшей величинепредельная полезность не изменяетсяпредельная полезность растет

+равна нулюравна наибольшей величинене изменяетсярастет

Средняя плотность населения Москвы:

Средняя плотность населения Москвы (тыс.чел./кв.км):

5-6 тыс.чел./кв.км7-8 тыс.чел./кв.км9-10 тыс.чел./кв.км11-12 тыс.чел./кв.км

5-67-89-1011-12

Слайд 23

Слайд 24

Предложите Ваш вариант корректной формулировки задания:

Формула Дюпона характеризует:+экономическую рентабельность активовэкономическую рентабельность собственных средствэкономическую рентабельность оборотных средствэкономическую рентабельность основных средств

ПРАВИЛЬНО:Формула Дюпона характеризует экономическую рентабельность:+активовсобственных средствоборотных средствосновных средств средств

Предложите Ваш вариант корректной формулировки задания:

Анализ безразличия прибыли на акцию – это анализ:+влияния различных источников финансированиявлияния структуры капиталавлияния постоянных и переменных затратвлияния структуры производства

ПРАВИЛЬНО:Анализ безразличия прибыли на акцию – это анализ влияния:+различных источников финансированияструктуры капиталапостоянных и переменных затратструктуры производства

Слайд 25

3. Лишние слова в формулировке ТЗ

НЕПРАВИЛЬНО ПРАВИЛЬНО

Из перечисленных ниже факторов выберите тот, который может способствовать расширению спроса на товар:

…

Фактор, способствующий расширению спроса на товар:

…

Какой из перечисленных ниже признаков характерен для чистой монополии?

…

Признак чистой монополии:…

Предложите Ваш вариант корректной формулировки задания:

Из приведенных ниже утверждений выберите то, которое наиболее точно характеризует принцип определения количества голосов страны в совете управляющих МВФ:…

ПРАВИЛЬНО:Принцип определения количества голосов страны в совете управляющих МВФ:…

ПРАКТИКУМ

Какие ошибки допущены?

Ваш вариант корректной формулировки задания

Какой налог из перечисленных ниже налогов относится к федеральным налогам?+налог на добавленную стоимость налог на имущество организацийналог на имущество физических лиц

ПРАВИЛЬНО: Федеральным является налог на: +добавленную стоимость имущество организаций имущество физических лиц

Какие ошибки допущены?

Ваш вариант корректной формулировки задания

Какой из следующих показателей следует отнести к показателям движения кадров?+коэффициент постоянства кадровсредний уровень квалификациистепень дифференциации работников по уровню зарплатыкоэффициент текучести кадров

ПРАВИЛЬНО:Показатель движения кадров:+коэффициент постоянства кадровсредний уровень квалификациистепень дифференциации работников по уровню зарплатыкоэффициент текучести кадров

Какие ошибки допущены?

Ваш вариант корректной формулировки заданияКакие из перечисленных функций относятся к внутренним функциям государства:+охранительная+воспитательнаядуховнаясоциальнаяполитическаяэкономическаяэкологическая

ПРАВИЛЬНО:Внутренние функции государства:…

Какие ошибки допущены?

Ваш вариант корректной формулировки задания

Для автоматизированного производства наиболее характерна следующая система оплаты труда:+повременнаясдельнаясдельно-прогрессивнаякомиссионная

ПРАВИЛЬНО:Система оплаты труда, характерная для автоматизированного производства:+повременнаясдельнаясдельно-прогрессивнаякомиссионная

Какие ошибки допущены?Ваш вариант корректной формулировки задания

Из перечисленных ниже долговых обязательств укажите инструменты денежного рынка: I. Казначейские векселя; II. Коммерческие векселя;III. Коммерческие бумаги; IV. Депозитные сертификаты.

a) верно I и II; b) верно I, II и III; c) верно I и III; d) все верно +

ПРАВИЛЬНО:Долговые обязательства, являющиеся инструментами денежного рынка:+казначейские векселя+коммерческие векселя+коммерческие бумаги+депозитные сертификаты……

Какие ошибки допущены?

Ваш вариант корректной формулировки заданияСоциальные потребности (чувство духовного родства, любовь) относят:+к третьей ступени иерархии потребностей по А. Маслоу ко второй ступени иерархии потребностей по А. Маслоук четвертой ступени иерархии потребностей по А. Маслоу к пятой ступени иерархии потребностей по А. Маслоу

ПРАВИЛЬНО:Ступень иерархии потребностей по А. Маслоу, к которой относят социальные потребности (чувство духовного родства, любовь):вторая+третьячетвертая пятая

Практическое задание

Предлагаем Вам закрепить полученные навыки редактирования формулировок тестовых заданий на специально подготовленном материале.

Успехов!