Основной задачей высшей школы является подготовка и выпуск специалистов имеющих высокое качество и объем знаний. Над этой проблемой работают все педагогические коллективы ВУЗов. Создаются методики преподавания отдельных дисциплин, технологии обучающих процессов, различные методические рекомендации и т.д. Конечным этапом процесса обучения, является контроль качества, и объем знаний, усвоенных студентами в процессе обучения. Ранее вопросы качества образования и контроля знаний студентов рассматривались в работах 1–4. Применение традиционных методов оценки знаний студентов (собеседование, письменный опрос, коллоквиумы) не всегда дают возможность оперативно произвести статистическую оценку усвоения отдельных тем и разделов, изучаемой дисциплины. Использование контролирующих тестов с заполнением таблиц и построением гистограмм позволяет преподавателю быстро и объективно оценить знания студентов, а так же оперативно произвести анализ усвоения материала по конкретным темам занятий и одновременно оценить действительность, надежность, дифференцированность и эффективность тестов.
В настоящей статье представлена задача получить наглядное, удобное для интерпретации, представление о качестве усвоения материала по результатам статистической оценки тестирования.
Методика статистической оценки состоит в следующем. Контрольный лист разбивается на квадраты, по оси абсцисс откладываются номера вариантов, участвующих в эксперименте В1, В2, В3,…Вn и количество опрошенных студентов по каждому варианту С1, С2, С3,…Сn. По оси ординат – номера вопросов, содержащихся в контрольном тесте 1, 2, 3,…i. Тесты, участвующие в оценке качества знаний, формируются по вариантам. Затем определяется суммарное количество неправильных ответов N1-1, N1-2, N1-3…N1-i, и их процент от общего количества опрошенных студентов по данному варианту:
,
где N1-1, N2-1, Nn-i – количество неправильных ответов соответственно в 1-ом варианте на 1-й вопрос, во 2-ом варианте на 1-й вопрос, в n-ом варианте на i-й вопрос.
С1, С2, Сn – количество студентов опрошенных соответственно по 1-ому, 2-ому, n-ому вариантам.
Результаты заносятся в квадрат на пересечении номера варианта В1 и соответствующего ему номера вопроса 1, что соответствует значению Х1-1 (таблица).
Чтобы выявить какие вопросы, а также темы и разделы предмета, плохо усвоены студентами, для наглядности строятся графики усвоения материала для каждого варианта. Где по оси абсцисс откладываются номера вопросов, а по оси ординат процент неправильных ответов по каждому вопросу (рис. 1).
Статистическая оценка результатов тестирования
количество опрошенных студентов |
С1 |
С2 |
С3 |
… |
… |
… |
Сn |
варианты вопросы |
В1 |
В2 |
В3 |
… |
… |
… |
Вn |
1 |
Х1-1 |
Х2-1, |
Х3-1, |
… |
… |
… |
Хn-1, |
2 |
Х1-2 |
Х2-2, |
Х3-2, |
… |
… |
… |
Хn-2, |
3 |
Х1-3 |
Х2-3 |
Х3-3 |
… |
… |
… |
Хn-3 |
… |
… |
… |
… |
… |
… |
… |
… |
i |
Х1-i |
Х2-i |
Х3-i |
… |
… |
… |
Хn-i |
Рис. 1. График усвоения материала по варианту 1
Для оценки дифференциации вопросов теста по их сложности, строится график трудоемкости тестов по вариантам. Где по оси абсцисс откладываются номера вариантов, а по оси ординат процент неправильных ответов на вопросы теста (за критерий оценки недостаточности знаний взяты вопросы, на которые ответили неправильно 40 и более процентов студентов, рис. 2).
Рис. 2. График трудоемкости тестов по вариантам
Предложенная методика была опробированна на результатах тестирования в учебных группах . Всего было обработано 282 теста. В качестве примера согласно приведенным графикам видно, что анализ результатов тестирования по первому варианту теста показал, что студенты имеют наибольший процент неправильных ответов на 3, 6, 8 вопросы, которые относятся к какому-нибудь разделу. В тоже время достаточно хорошо усвоены вопросы 1, 4, 5, 7, относящиеся к другим темам.
Оценка трудоемкости тестов показала, что вопросы по своей сложности не совсем равномерно распределены по вариантам. Так в 3, 7, 10 вариантах процент неправильных ответов составил от 40 % до 50 %, в тоже время в вариантах 1, 4, 5, 8 процент неправильных ответов составляет всего 20 %.
Предложенная методика позволяет:
● наглядно оценить качество усвоения студентами дисциплины по отдельным вопросам, темам, разделам и в целом всего материала;
● оперативно реагировать преподавателю на учебный процесс путем последующей корректировки подачи материала на лекциях, практических занятиях и консультациях;
● анализировать основные критерии качества тестов.