Анализ тестовых материаловРефераты >> Математика >> Анализ тестовых материалов
Для оценки качества атрибутов тестового задания использовался метод планирования эксперимента. Результаты тестирования представлены в таблицах по групповым принадлежностям в приложении 1. Каждый тестируемый получал 1 балл за верно выполненное задание и 0 – в противном случае. Из этих результатов была сформирована матрица, состоящая из 8 столбцов (количество вопросов в тесте) и 124 строк (число участников тестирования).
На первом этапе исследования была сформирована матрица по результатам тестирования, проведенного в марте – апреле 2006 г. со студентами 4 курса. Все студенты учатся в 5 разных группах и имеют разный уровень подготовки, поэтому результаты неоднозначны по своей групповой принадлежности. Матрица данных сформирована в текстовом документе и является общей для обоих методов. В матрице тестовых результатов удаляются все строки и столбцы, состоящие только из 0 и 1. Это объясняется тем, что:
- если строка состоит только из 0, то, значит, этот студент не ответил ни на один вопрос правильно, значит, этот тест сложен для него;
- если строка состоит из 1, то – тест слишком легок для этого студента;
- если столбец состоит из 0, то этот вопрос слишком сложен для испытуемых и его следует исключить из теста с последующей доработкой или полной заменой;
- если столбец состоит только из 1, то этот вопрос слишком прост и не сможет оценить уровень подготовки испытуемых.
Для вновь сформированной матрицы применяем один из методов.
2.1. Однопараметрическая модель Раша.
Рассмотрим принцип однопараметрической модели Раша на примере одной группы:
1 |
2 |
3 |
4 |
5 |
6 |
7 |
8 |
pi |
qi |
ln(pi/ qi) | |
1 |
0 |
0 |
1 |
1 |
1 |
0 |
0 |
0 |
3 |
5 |
-0,51 |
2 |
0 |
0 |
1 |
0 |
1 |
0 |
0 |
0 |
2 |
6 |
-1,09 |
3 |
1 |
1 |
1 |
1 |
1 |
1 |
1 |
0 |
7 |
1 |
1,946 |
4 |
1 |
1 |
1 |
1 |
1 |
1 |
0 |
0 |
6 |
2 |
1,098 |
5 |
0 |
1 |
1 |
0 |
0 |
0 |
1 |
0 |
3 |
5 |
-0,51 |
6 |
0 |
1 |
1 |
0 |
0 |
0 |
0 |
0 |
2 |
6 |
-1,098 |
7 |
0 |
0 |
1 |
0 |
1 |
0 |
0 |
0 |
2 |
6 |
-1,098 |
8 |
0 |
0 |
1 |
0 |
1 |
0 |
0 |
0 |
2 |
6 |
-1,098 |
9 |
0 |
1 |
1 |
0 |
1 |
0 |
1 |
0 |
4 |
4 |
0 |
10 |
1 |
1 |
1 |
1 |
0 |
0 |
1 |
0 |
5 |
3 |
0,51 |
11 |
0 |
1 |
0 |
0 |
1 |
0 |
0 |
0 |
2 |
6 |
-1,098 |
12 |
0 |
0 |
1 |
1 |
1 |
0 |
0 |
0 |
3 |
3 |
-0,51 |
13 |
0 |
1 |
1 |
0 |
0 |
0 |
1 |
1 |
4 |
4 |
0 |
14 |
0 |
0 |
1 |
0 |
0 |
0 |
1 |
0 |
2 |
6 |
-1,098 |
15 |
0 |
1 |
0 |
1 |
0 |
1 |
0 |
0 |
3 |
5 |
-0,51 |
16 |
0 |
0 |
1 |
1 |
0 |
0 |
1 |
0 |
3 |
5 |
-0,51 |
pj |
3 |
9 |
14 |
7 |
9 |
3 |
7 |
1 | |||
qj |
13 |
7 |
2 |
9 |
7 |
13 |
9 |
15 | |||
ln(qj/pj) |
1,466 |
-0,25 |
-1,94 |
0,251 |
-0,25 |
1,466 |
0,251 |
2,708 | |||
|
0,140 |
0,475 |
0,832 |
0,354 |
0,475 |
0,140 |
0,354 |
0,044 |