Mail плюсы и минусы тестирования. Онлайн-тестирование. Выводим интернет-курс на новый уровень. Плюсы и минусы тестирования специалистами

Метод тестов является одним из основных в современной психодиагностике. По уровню популярности в образовательной и профессиональной психодиагностике он прочно удерживает первое место в мировой психодиагностической практике уже фактически в течение столетия.

В данном разделе под тестами следует понимать методики, которые состоят из серии заданий с выбором из готовых вариантов ответа. При подсчете баллов по тесту выбранные ответы получают однозначную количественную интерпретацию и суммируются. Суммарный балл сравнивается с количественными тестовыми нормами, и после этого сравнения формулируются стандартные диагностические заключения.

Популярность метода тестов объясняется следующими главными его достоинствами:

1) стандартизацией условий и результатов. Тестовые методики относительно независимы от квалификации пользователя (исполнителя), на роль которого можно подготовить даже лаборанта со средним образованием. Это, однако, не означает, что для подготовки комплексного заключения по батарее тестов не надо привлекать квалифицированного специалиста с полноценным высшим психологическим образованием;

2) оперативностью и экономичностью. Типичный тест состоит из серии кратких заданий, на выполнение каждого из которых требуется, как правило, не более полминуты, а весь тест занимает, как правило, не более часа. Тестированию одновременно подвергается сразу группа испытуемых, таким образом, происходит значительная экономия времени на сбор данных;

3) количественным дифференцированным характером оценки. Дробность шкалы и стандартизованность теста позволяют рассматривать его как «измерительный инструмент», дающий количественную оценку измеряемым свойствам. Количественный характер тестовых результатов дает возможность применить хорошо разработанный аппарат психометрики, позволяющий оценить, насколько хорошо работает данный тест на данной выборке испытуемых в данных условиях;

4) оптимальной трудностью. Профессионально сделанный тест состоит из заданий оптимальной трудности. При этом средний испытуемый набирает примерно 50 % из максимально возможного количества баллов. Это достигается за счет предварительных испытаний – психометрического эксперимента (или пилотажа). Если в ходе пилотажа становится известным, что с заданием справляется примерно половина из обследованного контингента, то такое задание признается удачным, и его оставляют в тесте;

5) надежностью. Это, наверное, самое главное достоинство тестов в образовательной психодиагностике. Лотерейный характер современных экзаменов с вытягиванием счастливых или несчастливых билетов давно уже стал притчей во языцах. Лотерейность для экзаменующегося здесь оборачивается низкой надежностью для экзаменатора – ответ на один фрагмент учебной программы, как правило, не показателен для уровня усвоения всего материала. В отличие от этого любой грамотно построенный тест охватывает основные разделы учебной программы (тестируемой области знаний или проявления какого-то умения или способности). В результате возможность для «хвостистов» выбиться в отличники, а для отличника вдруг провалиться резко сокращается;

6) справедливостью. Является важнейшим социальным следствием перечисленных выше достоинств. Ее следует понимать как защищенность от предвзятости экзаменатора. Хороший тест ставит всех в равные условия. Наиболее сильно субъективизм экзаменатора проявляется, как известно, не в трактовке уровня решенности задачи (не так просто назвать черное белым, решенную задачу – нерешенной), а в тенденциозном подборе заданий – своим полегче, чужим – труднее. Тесты обеспечивают важнейшую функцию школы как социального фильтра – функцию «социально-профессиональной селекции». То, насколько справедливой оказывается подобная селекция, имеет гигантское значение для развития общества. Поэтому так важно всем, кто имеет доступ к тестам и их результатам, учиться культуре грамотного и гуманного применения тестов, ибо только добросовестное и квалифицированное отношение пользователей к тестам превращает их в инструмент, повышающий, а не понижающий уровень справедливости в обществе;

7) возможностью компьютеризации. В данном случае это не просто дополнительное удобство, сокращающее живой труд квалифицированных исполнителей при массовом обследовании. В результате компьютеризации повышаются все параметры тестирования (например, при адаптированном компьютерном тестировании резко сокращается время тестирования). Компьютеризация – это мощный инструмент обеспечения информационной безопасности (достоверности диагностики). Компьютерная организация тестирования, предполагающая создание мощных информационных банков тестовых заданий, позволяет технически предотвратить злоупотребления со стороны недобросовестных экзаменаторов. Выбор заданий, предлагаемых конкретному испытуемому, может производить из такого банка сама компьютерная программа прямо в ходе тестирования, и предъявление данному испытуемому определенного задания в этом случае является таким же сюрпризом для экзаменатора, как и для испытуемого.

Во многих странах внедрение метода тестов (равно как и сопротивление этому внедрению) тесно связано с социально-политическими обстоятельствами. Внедрение хорошо технически оснащенных тестовых служб в образование – важнейший инструмент в борьбе с коррупцией, поражающей правящую элиту (номенклатуру) во многих странах. На Западе тестовые службы работают независимо от выпускающих (школы) и принимающих (вузы) организаций и снабжают абитуриента независимым сертификатом о результатах тестирования, с которым он может отправляться в любое учреждение. Эта независимость службы тестирования от выпускающих и принимающих организаций является дополнительным фактором демократизации процесса селекции профессиональных кадров в обществе, дающая талантливому и просто работоспособному человеку лишний шанс проявить себя.

Одной из самых распространненых методик являются тесты. Тест - фиксированное во времени испытание, предназначенное для установления количественных и качественных индивидуальных психологических различий.

Классификация:

1) по предмету тестирования:

а) интеллектуальные - позволяют измерить степень развития умственных способностей.

б) личностные - измерительные неинтеллектуальные проявления личности (эмоции, мотивы, свойства личности и т.п.)

2) По форме процедуры обследования:

а) Индивидуальные тесты

б) Групповые тесты

3) По характеру тестового материала:

а) бланковые тесты - тестирование в форме различных бланков;

б) аппаратурные тесты - используются компы, аудио и видео техника и т.п.

4) По особенностям использования тестов:

а) вербальные (словарные тесты)

б) практические (мануальные) - манипуляции предметами (составить фигуру и т.п.)

Характеристики психологических тестов

- Валидность - соответствие результатов теста той характеристике, для измерения которой он предназначен.

Надёжность - свойство теста давать при повторном измерении близкие результаты. Надёжность как внутренняя согласованность - направленность всех элементов тестовой щкалы на измерение одного качества.

Под тестами следует понимать методики, которые состоят из серии заданий с выбором из готовых вариантов ответа. При подсчете баллов по тесту выбранные ответы получают однозначную количественную интерпретацию и суммируются. Суммарный балл сравнивается с количественными тестовыми нормами, и после этого сравнения формулируются стандартные диагностические заключения.

ДОСТОИНСТВА:

1. Стандартизация условий и результатов. Тестовые методики относительно независимы от квалификации исполнителя.

2. Оперативность и экономичность. Тест состоит из серии кратких заданий, на выполнение каждого из которых требуется полминуты, а весь тест - не более часа. , может тестироваться вся группа.

3. Количественный дифференцированный характер оценки. Дробность шкалы и стандартизованность теста позволяют рассматривать его как «измерительный инструмент», дающий количественную оценку измеряемым свойствам.

4. Оптимальная трудность. Профессионально сделанный тест состоит из заданий оптимальной трудности.

5. Надежность. тест охватывает основные разделы учебной тестируемой области знаний или проявления какого-то умения или способности.

6. Справедливость. Ее следует понимать как защищенность от предвзятости экзаменатора.

7. Возможность компьютеризации. Компьютеризация - это мощный инструмент обеспечения информационной безопасности (достоверности диагностики).

НЕДОСТАТКИ:

1) опасность «слепых» (автоматических) ошибок.

2) опасность профанации. Внешняя легкость проведения тестов привлекает людей, не желающих серьезно знакомиться с психодиагностикой

3) потеря индивидуального подхода, стрессогенность Тест предназначен для всех. Довольно вероятна возможность упустить уникальную индивидуальность нестандартного человека (тем более ребенка). Это чувствуют сами испытуемые, и это их нервирует - особенно в ситуации аттестационного тестирования, У людей с пониженной стрессо устойчивостью возникает даже определенное нарушение саморегуляции -они начинают волноваться и ошибаться в элементарных для себя вопросах

4) потеря индивидуального подхода, репродуктивность. Тесты знаний апеллируют прежде всего к стандартному применению готовых знаний;

5) отсутствие возможности раскрыть индивидуальность при наличии стандартных, заданных ответов

6) отсутствие доверительной обстановки. Процедура тестирования может создать у испытуемого впечатление, что психолог мало заинтересован в нем лично, в его проблемах и трудностях.

7) потеря индивидуального подхода, неадекватная сложность. Иногда неквалифицированные тестологи обрушивают на ребенка тесты, слишком сложные для него по возрасту. У него еще не сложились необходимые понятия и понятийные навыки, чтобы адекватно осмыслить как общую инструкцию к тесту, так и смысл отдельных вопросов.

23. Проективные тестовые методики. Общая характеристика .

Проективные методики основаны на выявлении проекции по результатам эксперимента с последующим их анализом.

Особенности:

1. Особенностями стимульного материала;

Отличительной особенностью стимульного материала проективных методик является его неоднозначность, неопределенность, что является необходимым условием реализации принципа проекции. В процессе взаимодействия личности со стимульным материалом происходит его структурирование, в ходе которого личность проецирует особенности своего внутреннего мира: потребности, конфликты, тревогу и т. д.

2. Особенностями поставленной перед респондентом задачи;

Относительно неструктурированная задача, которая допускает неограниченное разнообразие возможных ответов, — одна из основных особенностей проективных методик. Тестирование с помощью проективных методик — замаскированное тестирование, так как респондент не может догадаться, что именно в его ответе является предметом интерпретации экспериментатора. Проективные методики меньше подвержены фальсификации, чем опросники,

3. Особенностями обработки и интерпретации результатов.

Существует проблема стандартизации проективных методик. Некоторые методики не содержат математического аппарата для объективной обработки полученных результатов, не содержат норм.

Эти методики прежде всего характеризует качественный подход к исследованию личности, а не количественный, как психометрические тесты. И поэтому еще не разработаны адекватные методы проверки их надежности и придания им валидности.

Для более точного исследования данные, полученные с помощью проективных методик, следует соотносить с данными, полученными с помощью других методов.

Классификация проективных методик (по Л.Франку)

1. Конститутивные . Требуется структурирование и оформление стимула ; придание ему смысла.

Тест Роршаха ; Словесный тест ассоциаций (Гальтон); тест «Словарь» (исследование индивидуального тезауруса, кругозора).

2. Конструктивные .

Создание из оформленных деталей осмысленного целого.

Тест Мира (232 модели предметов, распр. по 15 категориям (дома, деревья, животные и др. Необходимо создать «свой мир»). М. Ловенфельд. Сценотест (как игра в куклы).

3. Интерпретативные (интерпретационные). Необходимо истолковать какую-либо ситуацию, событие. ТАТ и его модификации.

4. Катартические. Психодрама.

5. Рефрактивные. Речь, почерк.

6. Экспрессивные. Рисование на свободную или заданную тему.

7. Импрессивные. Предпочтение стимулов. Люшер, Сонди.

7. Аддитивные Завершение рассказа, ситуации, истории. Розенцвейг; Рука; Системный тест семьи Т.Геринга; Незаконченные предложения и их модификации.

Тестирование как средство обучения и контроля знаний используется давно. Само слово тест, в переводе с английского, означает – проверка, испытание. Здесь, под тестированием мы понимаем опрос: вопросы с предложенными ответами, из которых испытуемый выбирает один или несколько верных.

Задаваемые вопросы могут быть устными или в распечатанном виде, но на современном этапе развития общества оснащение учебных заведений и предприятий средствами вычислительной техники достаточно велико, для того чтобы проводить аттестации, проверочные работы с помощью компьютеров.

Очевидно, что основное преимущество автоматизированного тестирования – удобство использования, снижение трудоемкости, исключение ошибок при проверке (у компьютеров не бывает падения внимательности по причине усталости). Кроме того, дистанционное обучение , интерес к которому растет, без применения соответствующего программного обеспечения трудно представить.

Среди недостатков тестирования можно отметить трудность формулировки ответов на вопросы по предметам, связанным с общими законами развития природы, общества (философия, история, экономика, некоторые разделы астрономии, физики и т.д.), для которых свойственны неоднозначные ответы, и двоичной логики "да/нет" – недостаточно. Также, с помощью тестирования невозможно контролировать творческие знания. Итак, проверка понимания и умений в некоторых областях гуманитарных, общественно-политических дисциплин вне прерогативы тестирования. Для этого существуют иные методы оценки.

Существенный недостаток тестирования, косвенно связанный с вышеперечисленными проблемами, – это то, что обучаемые привыкают к готовым формулировкам, и теряют (не приобретают) способность свободно и грамотно излагать мысли. С другой стороны люди, стесняющиеся говорить, оказываются в равных условиях с "ораторами".

Иногда наши пользователи просят устранить "излишнюю объективность" программы для тестирования, имея ввиду что при устном опросе преподаватель может выбрать сложность задаваемых вопросов с учетом уровня подготовленности опрашиваемого, что невозможно при применении компьютерного тестирования. Трудно сказать нужно ли устранять такой недостаток.

Кроме этого, существуют изъяны тестирования, которые в программах SunRav Software с успехом устраняются. Перечислим некоторые из них.

К несовершенству тестирования часто относят некоторую негибкость итоговой оценки.

В программе SunRav TestOfficePro подведение итога работы тестируемого и выведение оценки настраивается по разным параметрам. Можно оценить:

• процент правильных ответов,
• отношение правильных ответов к неправильным или заданным,
• суммирование баллов (каждому ответу как правильному, так и неправильному можно присвоить свой коэффициент).

А также, в SunRav TestOfficePro существует возможность создать адаптивный тест, в котором переход к следующему заданию происходит в зависимости от ответов на предыдущие. Такая функция особенно востребована при создании тестов, применяемых для обучения, усвоения материала.

Таким образом, трудоемкость на первом этапе – создание баз тестов, внедрение тестирования в организацию – имеет временный характер. В целом компьютерное тестирование знаний несомненно более выгодно с экономической точки зрения, чем устные или письменные проверки.

Метод тестового контроля знаний пришел к нам из-за границы (из стран, в которых в систему обучения был внедрен болонский процесс), где оценивание студентов является равным для всех. Эта система контроля уровня знаний была разработана западными профессорами для того, чтобы сделать обучение более строгим. Каждый студент должен понять, что его успешность зависит лишь от его собственного желания «покорить вершину знаний», а для этого ему нужно направить все свои силы на изучение комплекса предметов и дисциплин, необходимых для получения квалификационного разряда. В противном же случае, без достаточного запаса знаний невозможно добиться высокого уровня профессионализма, следовательно, такие студенты «отсеются» к рабочему классу населения. Таким образом, каждый абитуриент, еще при поступлении, понимал, зачем он поступает в ВУЗ.

Конечно же, в нашей стране все, немного, иначе, но получение хорошего образования, так же, остается одним из самых важных заданий каждого молодого человека. Время показало, что использование такой тестовой системы контроля знаний является довольно успешным инструментом при обучении и проверки квалификационных навыков студентов. Но, так или иначе, как и любая система контроля имеет свои плюсы и минусы, и выше описанный метод контроля не является исключением.

К плюсам тестирования можно отнести объективность оценивания, а, следовательно, и равность всех студентов при прохождении тестовых билетов, так как все они получают одинаковые задания (в то же время и в том же месте) и имеют определенное количество времени на выполнение этого же задания. К положительным моментам тестирования можно отнести еще несколько аспектов, одним из которых является возможность охвата всех тем определенной дисциплины, в то же время, когда при устном экзамене преподаватель не может уделить одному студенту такое огромное количество времени для проверки его знаний. Как правило, при устном экзамене у преподавателя есть возможность задать вопрос студенту, максимум, по трем темам. Следующим плюсом тестирования является более адекватная шкала оценивания знаний. Например, если же тестовый билет состоит из пятнадцати вопросов, то максимальное количество балов, которое студент может получить при правильных ответах - 15. Если же будут допущены им ошибки, то будет видно, сколько ошибок он допустил и сразу же сориентироваться, насколько широкий уровень знаний по данной дисциплине у студента. Классическим методом студент может получить максимальную отметку - 5 баллов, причем, не всегда отметка, поставленная в зачетку, может соответствовать реальному уровню знаний.

К недостаткам такой системы контроля можно отнести трудоемкость составления таких тестов преподавателем. Так как количество тем по определенной дисциплине может варьироваться от нескольких штук до нескольких десятков, то можно понять, что это, достаточно, трудоемкий процесс и требует повышенной внимательности (если же преподаватель допустит ошибку при составлении ключей к тестам, студенты могут быть оценены необъективно). Еще одним минусом тестирования остается тот факт, что на определенный вопрос в билете приводится перечень возможных ответов, из которых нужно выбрать один, или же два правильных. Иногда студентам удается «наугад» проставить правильные варианты ответов. Таким образом, некоторые студенты могут получить незаслуженную оценку... А в прочем, если же студент угадывает варианты ответов, то он, наверняка, не сможет угадать все оставшиеся ответы на перечисленные в билете вопросы.

По сравнению с другими формами контроля знаний тестирование имеет свои преимущества и недостатки.

Преимущества

Тестирование является более качественным и объективным способом оценивания, его объективность достигается путем стандартизации процедуры проведения, проверки показателей качества заданий и тестов целиком.

Тестирование - более справедливый метод, оно ставит всех учащихся в равные условия, как в процессе контроля, так и в процессе оценки, практически исключая субъективизм преподавателя. По данным английской ассоциации NEAB, занимающейся итоговой аттестацией учащихся Великобритании, тестирование позволяет снизить количество апелляций более чем в три раза, сделать процедуру оценивания одинаковой для всех учащихся вне зависимости от места проживания, типа и вида образовательного учреждения, в котором занимаются учащиеся.

Тесты это более объёмный инструмент, поскольку тестирование может включать в себя задания по всем темам курса, в то время как на устный экзамен обычно выносится 2-4 темы, а на письменный - 3-5. Это позволяет выявить знания учащегося по всему курсу, исключив элемент случайности при вытаскивании билета. При помощи тестирования можно установить уровень знаний учащегося по предмету в целом и по отдельным его разделам.

Тест это более точный инструмент, так, например, шкала оценивания теста из 20 вопросов, состоит из 20 делений, в то время, как обычная шкала оценки знаний - только из четырёх.

Тестирование более эффективно с экономической точки зрения. Основные затраты при тестировании приходятся на разработку качественного инструментария, то есть имеют разовый характер. Затраты же на проведение теста значительно ниже, чем при письменном или устном контроле. Проведение тестирования и контроль результатов в группе из 30 человек занимает полтора два часа, устный или письменный экзамен - не менее четырёх часов.

Тестирование - это более мягкий инструмент, они ставят всех учащихся в равные условия, используя единую процедуру и единые критерии оценки, что приводит к снижению предэкзаменационных нервных напряжений.

Недостатки

Разработка качественного тестового инструментария - длительный, трудоемкий и дорогостоящий процесс.

Данные, получаемые преподавателем в результате тестирования, хотя и включают в себя информацию о пробелах в знаниях по конкретным разделам, но не позволяют судить о причинах этих пробелов.

Тест не позволяет проверять и оценивать высокие, продуктивные уровни знаний, связанные с творчеством, то есть вероятностные, абстрактные и методологические знания.

Широта охвата тем в тестировании имеет и обратную сторону. Учащийся при тестировании, в отличие от устного или письменного экзамена, не имеет достаточно времени для сколько-нибудь глубокого анализа темы.

Обеспечение объективности и справедливости теста требует принятия специальных мер по обеспечению конфиденциальности тестовых заданий. При повторном применении теста желательно внесение в задания изменений.

В тестировании присутствует элемент случайности. Например, учащийся, не ответивший на простой вопрос, может дать правильный ответ на более сложный. Причиной этого может быть, как случайная ошибка в первом вопросе, так и угадывание ответа во втором. Это искажает результаты теста и приводит к необходимости учета вероятностной составляющей при их анализе.

Именно последний из приведенных выше недостатков побудил провести небольшое исследование. Мне стало интересно, какой в среднем балл может получить ученик, отвечая на вопросы теста наугад. Группе учеников было предложено десять тестов на различные темы, которые отличались количеством вопросов, интерфейсом и способом реализации. Поскольку исследовалась именно вероятностная составляющая теста, учащиеся отвечали не задумываясь над сутью вопроса. Контрольным измерением каждого теста был процент правильно выполненных заданий. Всего было произведено 120 измерений. Контрольные значения колебались в пределах от 5% до 64%. Среднее значение, полученное по результатам всех измерений = 28,10%