Г. Определенность
Д. Ограниченность
Появление частично правильных ответов студентов, возникающих при выборе не всех запланированных верных ответов в каждом таком задании теста, приводит к снижению объективности и сопоставимости тестовых баллов. Если избежать нескольких правильных ответов невозможно, то для повышения стандартизации оценочных процедур вводят определенное решающее правило. Например, если испытуемый выбирает все правильные ответы, то он получает 1 балл, во всех других случаях – 0 баллов.
При подсчете результатов выполнения заданий с выбором одного правильного ответа обычно предпочитают дихотомическую оценку. За правильное выполнение задания испытуемый получает 1 балл, а за неправильный ответ или пропуск – 0. Суммирование всех единиц позволяет вычислить индивидуальный (первичный или сырой) балл испытуемого, который в случае дихотомической оценки просто равен количеству правильно выполненных заданий в тесте. Если правильный ответ не единственный, то чаще всего используется политомическая оценка, которую устанавливают пропорционально числу правильно выбранных ответов.
Если тест состоит из заданий с выбором, то индивидуальные баллы испытуемых будут существенно искажены эффектом случайного угадывания ответов. Поэтому сырые баллы стараются скорректировать, вводя поправки на догадку. Формула коррекции баллов, полученных в результате выполнения заданий с ответами, из которых только один верный, имеет вид
где
При выполнении заданий с двумя ответами
Сама по себе формула коррекции обладает определенными недостатками, снижающими точность тестовых измерений. Это связано с тем, что в основу ее построения положен ряд искусственных предположений, нередко не согласующихся с реальной процедурой выполнения теста. В частности, далеко не в полной мере выполняется предположение о том, что все неправильные ответы являются следствием случайного угадывания. Столь же условно другое предположение об одинаковой вероятности выбора каждого ответа задания теста.
В процессе создания заданий отдельные требования к форме неосознанно нарушаются. Как правило, это бывает связано с тем, что все внимание разработчика поглощено содержанием, а не формой. Нарушение отдельных требований порождает ряд характерных недостатков, возникающих даже у опытных авторов в процессе работы над заданиями теста. К числу наиболее распространенных недостатков предтестовых заданий можно отнести:
• отсутствие логической корректности в формулировках заданий теста, приводящее к незапланированным правильным ответам;
• нарушение правильных пропорций в форме задания, когда ответы намного длиннее основной части задания;
• нарушение требования краткости, вызванное включением лишних слов или представлением в тестовой форме того содержания, которое не годится для проверки с помощью теста;
• выбор ответов по разным основаниям;
• просчеты разработчиков заданий, способствующие угадыванию правильных ответов без выполнения заданий теста.
Например, неудачным можно считать задание 11, в котором приведена короткая основная часть и длинные ответы в силу того, что разработчик явно напрасно переставил их местами. Если само определение кругооборота капитала, данное на втором месте под буквой «Б», поместить в начало задания, то ответы могут состоять только из одного или нескольких слов.
Задание 11
КРУГООБОРОТ КАПИТАЛА – ЭТО
A. Непрерывное и последовательное движение денежного капитала
Б. Последовательное превращение капитала из одной функциональной формы в другую
B. Возвращение авансированной стоимости
Г. Функционирование товарного капитала
Неудачно подобраны ответы в задании 12, если рассматривать их безотносительно к содержательным просчетам автора. Если первые три ответа сравнивают между собой объем выпуска продукции монополиста и конкуренцию, то четвертый нацелен на установление причинной связи между объектами.
Задание 12
ОБЪЕМ ВЫПУСКА ПРОДУКЦИИ МОНОПОЛИСТА ПО СРАВНЕНИЮ С СОВЕРШЕННОЙ КОНКУРЕНЦИЕЙ БУДЕТ
A. Больше
Б. Меньше
B. Такой же
Г. Зависит от конъюнктуры рынка
Отсутствует содержательная и логическая корректность в задании 13, где из восьми приведенных параметров в ответах используются только пять.
Задание 13
КАКИЕ ДВА ПАРАМЕТРА НЕ ИСПОЛЬЗУЮТСЯ ДЛЯ АНАЛИЗА ОТЛИЧИЙ КУЛЬТУР СТРАН ДРУГ ОТ ДРУГА?
1. Взаимоотношение человека и окружающей среды
2. Оценка времени
3. Природа людей
4. Манера общения
5. Оценка степени активности
6. Свобода доступа информации
7. Взаимоотношение людей
8. Отношение к обладанию пространством
A. Четвертый и шестой
Б. Третий и шестой
B. Третий и пятый
Г. Четвертый и седьмой
Неудачным можно считать подбор дистракторов в задании 14, где вербальная ассоциация будет способствовать избыточной частоте выбора третьего, неправильного ответа.
Задание 14
КАКОЕ СОДЕРЖАНИЕ ВКЛАДЫВАЕТСЯ В ПОНИМАНИЕ «ОТКРЫТОЙ СИСТЕМЫ»?
A. Чутко реагирует на изменение внешней среды и изменяется в соответствии с ними
Б. Воспринимает из внешней среды все новые тенденции и обязательно применяет их в своей деятельности