Download - Введение в курс составления тестов
Введение в курс составления тестов.
Еловикова Дарья
При всей общеупотребительности понятия «тест» под ним понимаются нередко совершенно разные диагностические
методики или существенно различающиеся задания.
ТЕСТ — система взаимосвязанных заданий для контроля усвоения знаний, сформированности умений, навыков учащихся по определённому учебному материалу или практических знаний.
Обозначим терминологически следующие понятия:
ТЕСТОВОЕ ЗАДАНИЕ (тест-задание) — один из составляющих элементов структуры дидактического теста, включающий в себя краткую инструкцию для обследуемого, тестовую задачу, эталон ответа (или описание чёткого алгоритма выполняемых обследуемым действий). В наиболее распространённых тестах закрытого типа в структуру тестового задания входят варианты ответа (как правильные, эталонные, так и отвлекающие, «дистракторы»).
СУБТЕСТ — группа тестовых заданий, предназначенных для выявления одного из элементов структуры умений, навыков, значимого психического качества, либо относительно самостоятельного раздела знаний (по теме, по разделу, по предмету).
БАТАРЕЯ ТЕСТОВ — серия специально подобранных для диагностики тестов, каждый из которых является самостоятельной методикой со своими диагностическими характеристиками и возможностями. Обычно батареи тестов в дидактическом тестировании применяются при входном и итоговом контроле уровней подготовки поступающих или выпускников, а также при переходе учащихся с одной ступени обучения на другую.
знание фактов, их причин, различий;·
знание научных и иных проблем по изучаемой теме;·
знание фундаментальных понятий по теме, их определений, представление об объеме и содержании понятий, знание практических применений понятий;·
знание основных правил, закономерностей и законов, их формулировок, условий и границ проявления, специфики применения;·
знание теорий, опытных фактов, послуживших основой их разработки; основных положений, уравнений, доказательств, выводов, практических приложений, прогностических возможностей.
Проверять знания – значит проверять:
владение фактами: установление их причин, взаимосвязей;·
владение проблематикой: формулирование проблем по теме, умение отыскивать возможные пути решения проблемы;
владение понятиями: узнавание, определение понятий, раскрытие их объема, характеристика количественного состава объектов, их классификация, взаимосвязи, практическое применение понятий;·
владение правилами, закономерностями и законами: узнавание, формулирование, раскрытие содержания, раскрытие действий, связанных с применением;·
владение теориями: узнавание, отыскание опытных фактов, необходимых для разработки теории, раскрытие содержания теории (характеристика основных положений, уравнений, доказательств, выводов, осуществление на основе теории практических действий.
Проверять умения – значит проверять:
построения и осуществления алгоритма операций выполнения конкретных действий в структуре умения;·
моделирования практического выполнения действий, составляющих данное умение;·
выполнения комплекса действий, составляющих данное умение;· самоанализа результатов выполнения действий в сопоставлении с целью деятельности;·
времени выполнения умения.
Проверять наличие навыков – значит проверять навыки:·
Во-первых, он должен быть надежным. Надежность теста означает «согласованность» оценок у обследуемых лиц при их повторном тестировании тем же самым тестом или его эквивалентной формой.
РЕКОМЕНДАЦИИ ПО СОСТАВЛЕНИЮ ТЕСТОВЫХ ЗАДАНИЙ.
Во-вторых, он должен быть валидным. Исследование валидности должно давать ответ на вопрос, действительно ли данный тест измеряет то, для измерения чего он предназначен.
В педагогической практике используются четыре основных вида тестовых заданий:
Задания на соответствие
Задания на установление правильной последовательности
Открытые
Закрытые
Соответствие между автором и его произведением:
Пример ТЗ на соответствие:
Автор Книга
1.Эко а)Имя розы
2. Веллер б)Приключения Звягина
3. Гарсиа Маркес в)Полковнику никто не пишет
4. Коэльо г)Властелин колец
д)Вечер в Византии
е)Алхимик
Установите правильную последовательность действий бурильщика при бурении шпура:
установить бур в бурильную машину
продуть шланги сжатым воздухом
включить машину на полную мощность
соединить буровую штангу с коронкой
подключить шланги к бурильной машине
включить машину на небольшую подачу
забурить шпур
Пример ТЗ на установление правильной последСлайд 22овательности:
Настоящая фамилия В.И.Ленина -…
Компьютер – это_________автоматическое__________устройство для______________и передачи ________________
Примеры ТЗ открытого типа:
В соответствии с Женевскими конвенциями 1949 г.комбатантами являются:
А- все лица, включая гражданское население в период вооруженного конфликта;В- все лица, входящие в состав вооруженных сил;
С- лица, входящие в состав вооруженных сил и имеющие право непосредственно принимать участие в боевых действиях;
Д- медицинский и интендантский персонал, духовенство, юристы, журналисты.
Пример закрытого ТЗ:
1. ТЗ должно быть представлено в форме краткого суждения, сформулированного четким языком и исключающего двойное толкование.
2. Тест должен проверять конкретный заявленный объем знаний, умений, навыков.
Рекомендуемые требования к составлению тестовых заданий
3. Число заданий в тесте должно быть согласовано со временем выполнения теста и НЕ должно быть слишком мало (по 1-2мин. на задание).
4. Содержание ТЗ НЕ должно содержать повторов, двойных отрицаний, сленга и непреднамеренных подсказок.
5. В тексте ТЗ НЕ должно отражаться субъективного мнения или понимания.
6. Нельзя использовать сокращения и аббревиатуры, за исключением стандартизованных.
7. В формулировке ТЗ НЕ должно быть повелительного наклонения (выберите, вычислите, укажите и т.д.).
8. В заданиях закрытого типа НЕ должно быть заведомо ложных ответов.
9. Недопустимы ответы типа: все выше перечисленное верно, все указанные ответы неверны, и т.д.
10. Формулировка ТЗ должна быть выражена в повествовательной форме (вопрос исключается).
11. Лучше «длинный» вопрос и «короткие» ответы, чем наоборот.
В первой группе должно быть не менее 2-х элементов.
Количество элементов второй группы должно превышать количество в первой, но не более, чем в 2 раза и должно быть не более 8.
Вторая группа должна содержать дистракторы (ложные суждения)
Дополнительные требования к ТЗ на соответствие.
1. Каждое задание должно быть нацелено только на одно дополнение, место для которого обозначается точками.
2. Пропускаем ключевой элемент, знание которого является наиболее существенным.
3. Пропуски лучше ставить как можно ближе к концу задания.
Дополнительные требования к открытым ТЗ
1. Все ответы к одному заданию должны быть приблизительно одной длины.
2. Повторяющиеся слова в ответах вводятся в основной текст задания.
3. Ни один из дистракторов не должен быть частично правильным заключением, превращающимся при определенных дополнительных условиях в правильный ответ.
4. Все ответы должны быть параллельными по конструкции и грамматически согласованными с основной частью задания.
Дополнительные требования к закрытым ТЗ
При проведении тестового контроля знаний, умений и
навыков тестируемый должен получить
минимальный объем информации с советами и
требованиями по проведению тестирования,
своего рода памятку-инструкцию.
1. Для наиболее эффективной работы с тестами рекомендуем ознакомиться со следующими правилами:
2. Проработайте весь тест, отвечая только на те вопросы, которые не вызывают сомнений в ответе, выполните эти задания.
3. Потом подумайте над остальными вопросами, только не слишком долго размышляйте. Помните, что время тестирования ограничено и по статистике, именно первая реакция оказывается правильной.
4. Не отчаивайтесь и попробуйте угадать, использовав эрудицию и интуицию, ответы на оставшиеся вопросы. Так как при подсчете результатов тестирования все равно учитываются только правильные ответы, вы этим не ухудшите результат, а приобретете дополнительные шансы.
5. Сначала нужно прочитать каждое задание внимательно идо конца! Необходимо прочитать и понять, что от тебя требуется.
Она может включать в себя следующую информацию:
- задавать вопросы по процедуре выполнения теста;
- выполнять работу самостоятельно;
- в рамках процедуры выбирать темп и порядок выполнения работы.
Вы имеете право:
- пользоваться любыми справочными материалами и другими материалами и инструментами;
- разговаривать с кем бы то ни было, получать консультации во время работы над тестом, отвлекать других.
Во время тестирования запрещается:
Специфика работы по созданию ТЗ заключается в том, что, в большинстве случаев априорно невозможно оценить качество создаваемого ТЗ. Оценка качества ТЗ определяется в процессе их использования в учебном процессе. Эта работа заключается в выявлении ТЗ, не соответствующих заданному уровню сложности и их удалению из банка ТЗ, либо измене их статуса.
Трудность задания — процент испытуемых, верно выполнивших данное задание. Наиболее эффективным считают задание с уровнем трудности 50%. Если все задания такие, то максимальна дифференцирующая способность теста и распределение баллов за выполнение теста близко к нормальному.
Следует стремиться к отбору заданий с трудностью 40-60%. Предлагается включать в тест 20% тестовых заданий малой трудности (более 70% правильных ответов), 70% средней трудности (29 – 69% правильных ответов) и 10% тестовых заданий большой трудности (менее 25% правильных ответов).Выбор неверного ответа большим количеством сильных студентов говорит о том, что что-то не так с этим ответом.
Выбор неверного ответа малым количеством студентов говорит о его малом правдоподобии.
В хороших заданиях правильный ответ выбирает максимальное число испытуемых, а выборы неправильных ответов распределены равномерно. «Хороший» неверный ответ выбирается большим числом слабых студентов. Невыполнение задания — тоже сигнал к анализу причин. Если его выполнило менее 5% (остальные в принципе не выполняли) – следует внимательно посмотреть – почему.
Наконец, ТЗ для текущего контроля и самоконтроля не должны совпадать с используемыми в учебном процессе ТЗ для итогового контроля знаний.