Тестирование как средство оценивания результатов обучения учащихся

• Задания третьего уровня — это нетиповые эвристические задачи, которые требуют от ученика эвристической деятельности, т. е. преобразования исходных условий и часто — поиска дополнительных данных для подведения задачи под типовой алгоритм.

• Задания четвертого уровня — это задачи творческого характера, которые требуют самостоятельной деятельности обучающегося по созданию новой (авторской) версии решения некой проблемы. Такие задания для разработчиков тестов представляют определенную трудность при проверке (даже при бланковом тестировании, не говоря уже о компьютерном),

Мера трудности

• Мера трудности определяется разработчиком ТЗ и указывает субъективную величину того, насколько тяжело будет решить данное тестовое задание испытуемому с минимальным уровнем подготовки.

• Мера трудности зависит от следующих факторов: 

- количество концептов, необходимых для решения ТЗ;

- форма ТЗ;

- уровень значимости ТЗ;

- количество дистракторов.

Правила разработки теста:

время теста:

для школьников 1 – 1:30 часа

время на тестовое задание:

приблизительно 1,5 мин. (до 5 мин)

благоприятное время проведения теста:

утром – с 9 по 12

вечером с 16 по 18

Требования к тестовым заданиям:

• однозначность

• (смысл суждения должен быть понятен);

• ясность

• (тестируемый должен понимать, что от него хотят (использование информационного окна инструкция);

• краткость

• (не более 10 слов);

• истинное суждение (действие тестируемого должно превращать тестовое задание в истинное суждение);

• тестовое задание не должно содержать подсказок (например, объединение вариантов ответа);

• тестовое задание не должно формулироваться в виде вопроса;

• специфические признаки, ключевые слова выносятся в начало тестового задания. Нельзя начинать тестовое задание с предлога, союза, частицы;

• отсутствие частицы «не»;

• правильный ответ не должен выделяться от остальных (по стилю написания, по количеству слов в тексте);

• не допускается наличие повторяющихся фраз в вариантах ответов

• (лучше длинный вопрос и «короткие» ответы). [4]

Анализ научных работ ученых-педагогов и психологов показывает, что не всякая задача может стать тестом: она должна отвечать ряду требований и соответствующим критериям. В тестологии в классической и современной теории тестирования выделены следующие основные критерии качества теста: надежность, валидность, объективность.

Надежность. Надежность теста как один из критериев качества теста показывает, насколько точно измеряет данный тест изучаемое явление. Качественный тест, отмечает Н.А. Майоров, не может быть создан без тщательного изучения этого важного аспекта измерения. Надежность определяется, как правило, после окончания анализа задач и составления окончательной формы теста. Согласно исследованиям А.Н. Майорова, не может быть создан без тщательного изучения этого важного аспекта измерения. Надежность определяется, как правило, после окончания анализа задач и составления окончательной формы теста. Согласно исследованию А.Н. Майорова надежность характеризует точность теста как измерительного инструмента, устойчивость его к действию помех (состояния испытуемых, их отношения к процедуре тестирования и так далее). Сущность термина «надежность» А.Н. Майоров раскрывает с позиций психологии. Этот термин применяется в двух значениях. Тест называется надежным, если он является внутренне согласованным. Тест также называется надежным, если он дает одни и те же результаты для каждого испытуемого при повторном тестировании (ретестовая надежность). Внутренняя согласованность - это характеристика теста, указывающая на степень однородности состава заданий с точки зрения измеряемого качества (то есть все задания теста должны определять тестируемое качество).

Метод повторного тестирования (ретестирование) является основным при определении надежности психологических тестов. Для достижений, согласно А.Н. Майорову, наиболее приемлем метод определения надежности при тестировании параллельной формой теста. На эти концептуальные идеи мы опирались в процессе составления тестовых заданий в ходе исследования.

Валидность. Сущность этого понятия раскрывает, насколько полученные в результате тестирования результаты соответствуют объективной реальности. В современной тестологии, согласно исследованиям А.Н. Майорова, выделяют следующие виды валидности: очевидная валидность; валидность по содержанию (содержательная); конструктная (концептуальная); валидность по критерию (критериальная или эмпирическая валидность); сравнительная или конкурентная валидность.

Объективность. Результаты тестирования не должны зависеть от того, кто их про водит или условий проведения. Условиями повышения объективности тестирования является повышение уровня обоснованности, как самих тестов, так и методов их разработки, использования современной техники хранения и передачи тестовых материалов, последовательная работа по устранению возможностей намеренного тестового процесса.

Критериально- и нормативно-ориентированные тесты

В современной отечественной системе тестирования сложились два основных подхода к анализу результатов тестирования, которые отражают разные основания для сравнения и определяют разницу на большинстве этапов создания теста:

1. Критериально-ориентированный подход, в рамках которого разрабатываются тесты, ориентированные на критерий.

2. Нормативно-ориентированный подход, в рамках которого разрабатываются тесты, ориентированные на норму.

Понимание критериальной и нормативной ориентированности как разных методологий интерпретации результатов тестирования можно найти у В.С. Аванесова: “Для критериально-ориентированной интерпретации вывод выстраивается вдоль логической цепочки: задания - ответы - выводы о соответствии испытуемого заданному критерию, для нормативно-ориентированной ориентации логика построения вывода иная: задания - ответы - выводы о знаниях испытуемого - рейтинг, понимаемый как вывод о месте или ранге испытуемого” [1, с. 43].

Нормативно-ориентированный подход дает возможность для сравнения учебных достижений (уровень подготовки, уровень профессиональных знаний и умений) отдельных испытуемых друг с другом. Сравнимость достигается