Технология составления тестов достижений. Коэффициент трудности теста.

Тест достижений – это группа психодиагностических методик, направленных на оценку достигаемого уровня развития навыков и знаний.

2 группы тестов достижений:

1. Тесты успешности обучения (используются в системе образования)

2. Тесты профессиональных достижений (тесты диагностики специальных знаний и трудовых навыков, необходимых для выполнения профессионально-трудовых действий).

Тест достижения противоположен тесту способностей. Различия: между этими тестами существует различие в степени единообразия предшествующего опыта, который и диагностируется. Если тест способностей отражает влияние совокупного разнообразного опыта, получаемого учащимися, то тест достижений отражает влияние относительно стандартного курса обучения чему-то.

Цель применения тестов способностей и тестов достижений:

· тесты способностей – для предсказания различия успешности выполнения деятельности

· тесты достижений – делают конечную оценку знаний и навыков по завершении обучения.

Ни тесты способностей, ни тесты достижений не диагностируют способности, навыки, одаренность, а только успешность предшествующего достижения. Идет оценка того, чему человек научился.

Классификация тестов достижений.

Широкоориентированные – для оценки знаний и навыков, соответствие основным целям обучения (рассчитанным на продолжительное время). Например: тесты достижений на понимание научных принципов.

Узкоспециализированные – усвоение отдельных принципов, отдельных или учебных предметов. Например: усвоение темы в математике – раздел простые числа – как усвоен этот раздел.

Цели использования тестов достижений.

Вместо учительской оценки. Ряд преимуществ по сравнению с учительской оценкой: объективность - можно выяснить насколько усвоены главные темы, выявление основного. Можно построить профиль усвоения каждой темы.

Тесты достижений очень компактны. Тесты достижений – групповые – поэтому удобны. Можно оценить сам процесс обучения и усовершенствовать его.

Как конструировать тесты достижений?

1. Тест достижений состоит из заданий, которые отражают определенную область содержания курса обучения. Сначала нужно спланировать тему содержания, выявить важные темы в курсе обучения. В конструировании теста достижений должен участвовать учитель, который преподавал темы. Психодиагност должен знать основные темы.

2. Исключить из задания второстепенные знания, малосущественные детали. Желательно, чтобы выполнение заданий в малой степени зависело от механической памяти ученика, а зависело от понимания, критической оценки ученика.

3. Задания должны быть репрезентативны целям обучения. Есть цели обучения, успешность усвоения материала, по которым сложно оценить (например, усвоение темы о правах), тогда нужно составлять задания так, чтобы отразить усвоенность материала.

4. Тест достижений должен полностью охватить ту область учебного предмета, который должен быть изучен. Задания должны быть широко репрезентативны этой изучаемой области.

5. Тестовые задания должны быть свободны от посторонних затрудняющих элементов, не должно быть затрудняющих элементов, не должно быть дополнительных трудностей.

6. Каждое задание сопровождается вариантами ответов.

7. Задание должно быть четко, кратко, недвусмысленно сформулировано. Чтобы ни одно задание не было подсказкой на другое задание теста (проверить после составления).

Ответы должны быть построены так, чтобы исключить возможность напоминания ответов (то есть не давать не относящихся к теме варианты ответов или очень легкие, чтобы испытуемый не смог догадаться, отбросив варианты ответов, как заведомо неприемлемые).

8. Задается критерий выполнения. Психолог разрабатывает большое число заданий, не все они войдут в тест. Для начала все задания проходят проверку. Войдут в тест те задания, которые решаются стопроцентным большинством людей, которые хорошо владеют материалом. Вторая проверка на тех, кто не владеет материалом – они должны выполнить меньше половины. Задания составляются по максимальному критерию. 90-100% - высокий уровень обученности. Тест достижений не оценивается по сопоставлению со статической нормой, а с классом. Сопоставляется индивидуальный результат.

Трудность теста - это отношение кол-ва решенных к не решенным задачам, выражена в %. Оптимальный коэффициент трудность = 50. Психологическое обследование состоит из нескольких тестов. Поэтому коэффициент трудности рассчитывается не по каждому тесту, а по всей батарее, путем расчета среднего коэфф. трудности.

13. Характеристика измерительных шкал в психологических исследованиях. Различают несколько типов шкал:

1. Шкала наименований - получается путем присвоения «имен» объектам. Объекты сравниваются друг с другом, и определяется их эквивалентность – неэквивалентность.

2. Шкала порядка - упорядочивание объектов по степени выраженности какого-нибудь признака.

3. Шкала интервалов.

4. Шкала отношений.

1. Виды психологических измерений

В естественных науках следует различать, как предлагает С.С. Паповян, три вида измерения:

1. Фундаментальное измерение основывается на фундаментальных эмпирических закономерностях, позволяющих непосредственно вывести систему числовых отношений из эмпирической системы.

2. Производное измерение — это измерение переменных на основе закономерностей, связывающих эти переменные с другими. Для производного измерения требуется установление законов, описывающих связи между отдельными параметрами реальности, позволяющих вывести " скрытые" переменные на основе непосредственно измеряемых переменных.

3. Измерение " по определению" производится тогда, когда мы произвольно предполагаем, что система наблюдаемых признаков характеризует именно это, а не какое-либо другое свойство или состояние объекта.

Методы психологических измерений могут быть классифицированы по различным основаниям:

1) процедуре сбора " сырых" данных;

2) предмету измерения;

3) виду используемой шкалы;

4) типу шкалируемого материала;

5) моделям шкалирования;

6) числу мерностей (одномерные и многомерные);

7) мощности метода сбора данных (мощные или слабые);

8) типу ответа индивида;

9) какими они являются: детерминистскими или вероятностными.

Для психолога-экспериментатора главными основаниями являются процедура сбора данных и предмет измерения.

Чаще всего применяются следующие процедуры субъективного шкалирования:

Метод ранжирования. Все объекты представляются испытуемому одновременно, он должен их упорядочить по величине измеряемого признака.

Метод парных сравнений. Объекты предъявляются испытуемому попарно. Испытуемый оценивает сходства — различия между членами пар.

Метод абсолютной оценки. Стимулы предъявляются по одному. Испытуемый дает оценку стимула в единицах предложенной шкалы.

Метод выбора. Индивиду предлагается несколько объектов (стимулов, высказываний и т.д.), из которых он должен выбрать те, которые соответствуют заданному критерию.

По предмету измерения все методики делятся на а) методики шкалирования объектов; б) методики шкалирования индивидов и в) методики совместного шкалирования объектов и индивидов.

Методики шкалирования объектов (стимулов, высказываний и др.) встраиваются в контекст экспериментальной или измерительной процедуры. По своей сути они не являются задачей исследователя, а представляют собой экспериментальную задачу испытуемого. Исследователь использует эту задачу для выявления поведения испытуемого (в данном случае — реакций, действий, вербальных оценок и др.), чтобы знать особенности его психики.

При субъективном шкалировании испытуемый выполняет функции измерительного прибора, а экспериментатор мало интересуется особенностями " измеряемых" испытуемым объектов и исследует сам " измерительный прибор.