Презентация на тему Немного о современной теории создания тестов

создания тестов, в основе которой применение математико-статистических моделей измерения

для оценки латентных параметров испытуемых и параметров заданий теста.
Модели педагогических измерений в рамках IRT являются частным примером более общей теории латентно-структурного анализа LSA (Latent Structure Analyses).
Латентно-структурный анализ нацелен на выявление внутренних, скрытых качеств и факторов поведения (деятельности) учащихся посредством математико-статистических моделей измерения и обработки результатов.

уровень подготовки испытуемых.
Устойчивость и объективность оценок параметра трудности

заданий, их независимость от свойств выборки испытуемых.
Возможность измерения уровня подготовленности учащихся и трудности заданий на одной шкале (шкале логитов).
Перечисленные преимущества очень важны для развития процессов тестирования в любой стране. С помощью IRT можно предсказать вероятность правильного выполнения заданий теста любым испытуемым в выборке до предъявления теста учащимся. А также выявить эффективность различных по трудности заданий для тестируемых групп учащихся с различной подготовкой. Преимущества IRT подкреплены соответствующим аппаратом, для которого характерно строгое формализованное представление и анализ эмпирических данных.

- это расстояние, на котором находится испытуемый с уровнем

подготовки θi , от задания с трудностью βj.
Большая и отрицательная разность говорит о том, что ученик не сможет его выполнить. Большая положительная разность – очень легкое задание.

несколько видов математических моделей, используемых для анализа качества современных

тестов.
Однопараметрическая модель Раша (G. Rash) устанавливает зависимость между уровнем подготовленности испытуемого и трудностью заданий. Вероятность правильного ответа на задания выражается посредством логистической функции, после введения которой симметрично возникла математическая модель, описывающая вероятность правильного ответа в зависимости от трудности заданий, строятся характеристические кривые. Если используются тест с известными устойчивыми значениями параметра трудности, то задача сводится к оценке значений уровня подготовленности испытуемых.

(β)

(θ)

- независимые переменные для первой и

второй функции.

функции Рi – индивидуальная кривая испытуемого.

В предположении о нормальном

распределении значений латентных переменных θ и β, получаем две функции: Ψ(х) – логистическая кривая, Ф(х) – интегральная функция нормированного нормального распределения.
Поскольку для одних и тех же значений х ординаты точек графиков функций Ф(х) и Ψ(1,7х) отличаются друг от друга достаточно мало
| Ф(х) - Ψ(1,7х) |<0,01,
то для практических задач предпочитают логистическую функцию Ψ(1,7х).

для j-го задания теста
θ

задания теста
Увеличение трудности задания на константу с вызовет смещение

кривой вправо. С прежней вероятностью на это более трудное задание будут отвечать испытуемые с уровнем подготовки Θl+c,
так как Θ - βj=(Θ+c) – (βj+c), значения функции Рj(Θ) не изменятся.

θ

1

Pl

c

c

для анализа еще один параметр – дифференцирующую способность, позволяющая

оценить меру структурированности знаний учащегося. Для трехпараметрической модели учитывается вероятность угадывания. Но из-за сложности обработки трехпараметрическую модель почти не используют.

Используемые модели IRT позволяют повысить точность измерений и оптимизировать процедуру контроля за счет адаптации теста к уровню подготовленности учащегося.
Возможность объединить на одной шкале измерения уровня подготовленности учащихся и трудности заданий серьезное преимущество IRT перед классической теорией.

характеристики дифференцирующей способности задания при изменении различных значений θ,

параметр ai указывает на меру структурированности знаний ученика.

параллельными, если задания проверяют достижение одинаковых требований обязательной подготовки

и имеют одинаковые статистические характеристики. Иначе говоря, тесты считают параллельными, если они построены на основе одной спецификации, имеют одинаковое количество заданий попарно равной трудности с совпадающими характеристиками.
В зарубежной практике пользуются понятием «эквивалентные формы» с таким объяснением: «любая из двух или более форм теста со сходным содержанием и сложностью, которые дают для данной группы очень сходные средние оценки и меры изменчивости».

теории тестов
Надежность отражает точность тестовых измерений и устойчивость

тестовых результатов к действию случайных факторов. Данная характеристика имеет два значения: точность измерения означает устойчивость к действию помех, всевозможных случайностей при проведении процедуры тестирования. Уменьшить случайные факторы можно, как говорилось ранее, грамотно составленной инструкцией, устойчивым тест считают, если получены близкие по значению результаты при повторном тестировании на параллельной форме.

влияют:
Внутренняя согласованность теста (содержательная однородность)
2. Длина теста.

k – количество заданий,

квадрат стандартного отклонения

оценки валидности:
подсчет корреляции с внешним критерием;
экспертиза.

помощью знаков и сигналов Б) то, что ученик узнал на

уроке или можно узнать из газет, радио, телевидения 
В) важные для человека сведения  Г) наблюдения, записанные и сохраненные на каких-либо носителях.

2. Виды информации, которые человек получает с помощью органов чувств называется:
А) органической;
Б) органолептической;
В) чувственной;
Г) чувствительной.

решения называют:
А) Полной
Б) Понятной
В)

Актуальной
Г) Достоверной

Под термином «канал связи» в информатике понимают:
А) техническое устройство, обеспечивающее кодирование сигнала при передаче его от источника информации к приемнику информации
Б) физическую линию (прямое соединение), телефонную, телеграфную или спутниковую линию связи и аппаратные средства, используемые для передачи данных (информации);
В) устройство кодирования и декодирования информации при передаче сообщений;
Г) совокупность технических устройств, обеспечивающих прием информации

источника и приемника информации, а также канала связи между

ними;
Б) двух людей;
В) дуплексного канала связи;
Г) избыточности передающейся информации.

Чему равен 1 байт?
А) 12 бит
Б) 8 бит
В) 1 бит
Г) 1 мегабайт