3. ТИПИЧНЫЕ ОШИБКИ ПРИ РАЗРАБОТКЕ ТЕСТОВЫХ ЗАДАНИЙ

Наиболее часто встречающиеся ошибки:

1. Излишняя сложность, запутанность формулировки.

(125). ВЫБЕРИТЕ ПРАВИЛЬНЫЙ ОТВЕТ

ВЛИЯЕТ ЛИ НА ЕЕ ВЕЛИЧИНУ ВЫСОТА ВОЗМОЖНОГО ПАДЕНИЯ ГРУЗА ПРИ ОПРЕДЕЛЕНИИ ГРАНИЦ ОПАСНОЙ ЗОНЫ (Rоп)?

– да

– нет

2. Неоднозначность условия.

(126). ВЫБЕРИТЕ ВЕРНЫЕ ВАРИАНТЫ

ДЛЯ ЗАДЕРЖАНИЯ ЭТИХ ВЕЩЕСТВ ПРЕДНАЗНАЧЕНЫ КАТИОНИТОВЫЕ ФИЛЬТРЫ (ПЕРЕЧИСЛИТЬ ВСЕ)

– ионы солей

– взвеси

– газы

– коллоиды

Указание «перечислить все» вводит в заблуждение, так как в эталоне указан только один правильный ответ

3. Очевидность решения.

(127). ВСТАВИТЬ СЛОВО

ВЕЛИЧИНА НЕВЯЗКИ – ЭТО НЕОТРИЦАТЕЛЬНОЕ …

Правильный вариант ответа: «число»

(128). ВСТАВИТЬ ПРОПУЩЕННОЕ СЛОВО

ОСНОВНОЙ ЗАДАЧЕЙ ДИСЦИПЛИНЫ(Подъёмно-транспортные машины) ЯВЛЯЕТСЯ ПРИОБРЕТЕНИЕ НЕОБХОДИМЫХ … И НАВЫКОВ ДЛЯ ПРОЕКТИРОВАНИЯ СПЕЦИАЛЬНЫХ ТРАНСПОРТНЫХ СРЕДСТВ.

Правильны вариант ответа: «знаний»

(129). ВЫБЕРИТЕ ПРАВИЛЬНЫЙ ОТВЕТ

ОСНОВОПОЛОЖНИКОМ ТЕОРИИ СОЦИАЛЬНОГО КОНФЛИКТА СЧИТАЕТСЯ НЕМЕЦКИЙ ФИЛОСОФ

– Карл Маркс

– Владимир Ленин

– Питирим Сорокин

4. Зависимость результата от памяти или от других индивидуальных особенностей испытуемого, а не от уровня развития тех умений и навыков, для оценки которых разрабатывается тест (кроме заданий, где необходима именно работа памяти). Как правило, это вопросы, которые выясняют оценки, мотивацию, мнения и т. д.

(130). КАКИЕ ИННОВАЦИОННЫЕ ТЕНДЕНЦИИ В ОРГАНИЗАЦИИ ЛЕКЦИЙ ВЫ МОЖЕТЕ НАЗВАТЬ?

– тенденция к большому использованию информационных технологий в процессе лекций (интернет, ТВ, радио)

– наличие хорошей памяти

– умение держаться перед аудиторией

– хорошая физическая форма

(131). СРЕДИ БЛИЖАЙШИХ СТУДЕНТОВ З.ФРЕЙДА НАИБОЛЕЕ ИЗВЕСТНЫ

– У. Джеймс

– В. Вундт

– А. Адлер

– Р. Кеттелл

– К. Юнг

– В. Франкл

Фраза «наиболее известны» требует уточнения – КОМУ наиболее известны? Может быть, среди испытуемых встретится тот, кому кроме указанных в эталоне двух имен известны (в смысле «подробно, основательно изучены») и другие из перечисленных.

5. Абсурдность, нереальность вариантов ответов.

(132). ПРИ ПОСТРОЕНИИ ДИАГРАММЫ В EXCEL МАСТЕР ДИАГРАММ ПОСТРОИТ ЛЮБУЮ ДИАГРАММУ ЗА _____ ШАГОВ

Правильный ответ «4» не согласуется с текстом задания. Испытуемый при такой постановке вопроса начнет перебирать ответы, начиная с 5, 6, 7 и т. д.

(133). ВЫБЕРИТЕ ПРАВИЛЬНЫЙ ОТВЕТ

В ПРОЦЕССЕ ИЗГОТОВЛЕНИЯ БУРОНАБИВНЫХ СВАЙ КОНТРОЛИРУЮТ КАЧЕСТВО:

– отказ сваи

– величину залога

– устройства скважины и качество укладки бетонной смеси

(134). УКАЖИТЕ ПРАВИЛЬНЫЙ ОТВЕТ

СОГЛАСНО ТЕОРИИ СРАВНИТЕЛЬНОГО ПРЕИМУЩЕСТВА МЕЖДУНАРОДНАЯ СПЕЦИАЛИЗАЦИЯ СТРАНЫ ОПРЕДЕЛЯЕТСЯ

– размером страны

– правительством

– транспортными расходами

– все перечисленное неверно

6. Появление двух и более правильных ответов, не оговоренное в условии.

(135). УКАЖИТЕ НЕ МЕНЕЕ ДВУХ ВЕЩЕСТВ ИЗ СПИСКА, СПОСОБНЫХ К ХИМИЧЕСКОМУ ОБЕСКИСЛОРАЖИВАНИЮ ВОДЫ

– сульфит натрия

– сернистый газ

– тиосульфит натрия

– хлор

– известь

– флокулянт

– гидразин

В эталоне указано 4 правильных ответа, т. е., выбрав три, как указано в задании (не менее двух), испытуемый получит неверно выполненное задание.

7. Логические ошибки, вытекающие из несоответствия инструкции содержанию задания и содержанию ответов.

(136). ЗАКОНЫ РАСПРЕДЕЛЕНИЯ ВРЕМЕНИ МЕЖДУ ОТКАЗАМИ ХАРАКТЕРИЗУЮТСЯ

– потоками отказов

– интенсивностью потоков отказов

– параметром потока отказов

– ничем не характеризуется

(137). РАСПРЕДЕЛЕНИЕ РЕЛЕЯ ИСПОЛЬЗУЕТСЯ

– при исследовании надежности радиоэлектронной аппаратуры

– при исследовании надежности электровакуумных приборов

– при исследовании надежности электромеханических изделий

– нигде не используется

(138). ЗАВИСИМОСТЬ КОЛИЧЕСТВА ФОТОЭЛЕКТРОНОВ ОТ ЧАСТОТЫ СВЕТА

– прямо пропорциональная

– обратно пропорциональная

– зависимости нет

Ошибочными являются последние варианты ответов: они находятся в логическом противоречии с содержанием задания, где утверждается существование такого элемента (характеристики, способа использования, зависимости).

8. Нарушение правила подбора ответов по одному основанию (нарушение принципа однородности):

(139). ТЕХНИЧЕСКАЯ НОРМА ЗАГРУЗКИ ВАГОНА ОПРЕДЕЛЯЕТСЯ

– делением количества погруженных тонн на количество погруженных вагонов

– по Сборнику правил перевозки тарифов № 160

– по минимальной норме загрузки вагона

– по грузоподъемности

– по Прейскуранту № 10-01

Первый вариант ответа «делением количества погруженных тонн на количество погруженных вагонов» не соответствует принципу однородности и отвечает на другой вопрос – «как, каким действием», а не «согласно какому документу», как остальные дистракторы.

(140). В ТРЕУГОЛЬНИКЕ ВЫСОТА ЯВЛЯЕТСЯ МЕДИАНОЙ И БИССЕКТРИСОЙ

– верно

– если треугольник равнобедренный

– неверно

Первый и третий ответы образуют вместе с содержанием задания безусловные неверные утверждения; второй ответ порождает верное условное утверждение. Исправить ситуацию можно было бы, сформулировав по-другому – «верно, если треугольник равнобедренный» или «неверно, если треугольник разносторонний». Деление понятий должно проводиться по одному, определенному основанию.

9. Многословные формулировки задания и ответов, требующие слишком много времени на прочтение. Повторяющиеся формулировки.

Главная причина появления многословия в заданиях – использование двух и более условий, например:

Задание сформулировано очень длинно, в виде ситуации, по сути, такое задание не является тестовым:

(141). ПРЕДСТАВЬТЕ СЕБЕ СЛЕДУЮЩУЮ СИТУАЦИЮ (далее в кавычках текст задания):

«Вы работаете на медицинскую клинику, которая обслуживает пациентов круглосуточно. Вы устанавливаете витую пару Ethernet в новом крыле здания. Будет добавлено 25 машин, но предполагается, что это число удвоится в течение первого года. Есть некоторое беспокойство по поводу восстановления после сбоев, вызванное недавними сообщениями в новостях. По причинам конфиденциальности информации о пациентах ленты с резервными копиями хранятся отдельно. Стоимость не имеет значения.

Требуемый результат:

Увеличить степень отказоустойчивости для ваших файловых серверов до максимально возможной степени.

Желательные дополнительные результаты:

1. Вы хотите запланировать ожидаемый рост.

2. Вы должны поддерживать высокий уровень защиты. Предлагаемое решение:

3. Внедрить дисковый массив RAID 5 для всех файловых серверов в клинике».

Предлагаются на выбор ответы:

– Предложенное решение даст как требуемый результат, так и оба дополнительных результата.

– Предложенное решение даст требуемый результата из дополнительных результатов даст только один.

– Предложенное решение даст требуемый результат, но из дополнительных результатов не будет получен ни один.

– Предложенное решение не даст требуемого результата.

В компьютерном тестировании такое задание с трудом помещается на экране, его чтение занимает много времени, не говоря уж об осмысливании ответов.

(142). ЕСЛИ НОМИНАЛЬНЫЙ ДОХОД ПОВЫСИЛСЯ НА 8 %, А УРОВЕНЬ ЦЕН ВЫРОС НА 10 %, ТО РЕАЛЬНЫЙ ДОХОД

– увеличился на 18 %

– увеличился на 2 %

– останется прежним

– уменьшился на 2 %

С точки зрения формы, лучше использовать одно условие вместо двух. Задание при этом становится короче, но при этом теряется полнота содержания и глубина контроля.

Особенно неприемлемо многословие в ответах. Этим страдают задания, сформулированные по принципу удвоенного противопоставления. Нежелательное многословие в ответах возникает вследствие «лобового» противопоставления одних элементов другим, с использованием одного и того же словесного состава. В таких случаях лучше искать другие формы.

10. Отрицательно сформулированные задания не сразу поддаются логическому анализу, тем более при дефиците времени.

(143). МЕЖДУ СОБСТВЕННЫМИ ОБОРОТНЫМИ СРЕДСТВАМИ И ВЕЛИЧИНОЙ ОБОРОТНЫХ АКТИВОВ НЕ МОЖЕТ БЫТЬ СОГЛАШЕНИЯ

– собственные оборотные средства оборотные активы

– собственные оборотные средства оборотные активы

– собственные оборотные средства оборотные активы

– собственные оборотные средства оборотные активы

Недопустимыми являются формулировки типа:

(144). УКАЖИТЕ ВЕРНЫЙ ОТВЕТ

УКАЖИТЕ НЕВЕРНОЕ УТВЕРЖДЕНИЕ

– одним из главных условий успешного маркетинга является разработка комплекса маркетинговых коммуникаций

– маркетинг получил свое развитие в Древнем мире, а реклама – только в начале ХХ века

– концепция социально-этичного маркетинга ориентирована на удовлетворение потребностей покупателей, таким образом, и через такие товары, чтобы поддерживалось и улучшалось благополучие всего общества в целом

В этом задании правильный ответ – это неправильный ответ. Попробуй, испытуемый, разберись за короткое время!

11. Использование среди дистракторов вариантов «все ответы верные» или «все вышеперечисленное верно». При компьютерном тестировании варианты ответов при каждом предъявлении перемешиваются и «все вышеперечисленное верно» может попасть на первое место, т. е. выше него никаких вариантов нет. Недопустимо, чтобы ответ «все перечисленное верно» был верным ответом, так как, отмечая правильные ответы, испытуемый может начать отмечать по очереди все верные ответы, но они не входят в эталон, поэтому весь ответ на задание будет неверным. Примером такого недоразумения является задание:

(145). УКАЖИТЕ ПРАВИЛЬНЫЙ ОТВЕТ

СУБЪЕКТАМИ МЕЖДУНАРОДНОГО ДВИЖЕНИЯ КАПИТАЛА ЯВЛЯЮТСЯ

– корпорации

– правительственные организации

– коммерческие банки

– все перечисленное верно

В качестве эталонного ответа предлагается «все перечисленное верно». При этом любой из перечисленных вариантов ответов будет правильным, но если испытуемый выберет какой-то из них, кроме «все перечисленное верно», то получит неверно выполненное задание. Другими словами, задания с такой формулировкой ответов изначально являются провальными для испытуемых:

(146). ВЫБЕРИТЕ ПРАВИЛЬНЫЙ ОТВЕТ

К СПЕЦИАЛЬНЫМ МОНТАЖНЫМ СОЕДИНЕНИЯМ (СМС) ОТНОСЯТСЯ

– указанное в других пунктах

– пристрелка высокопрочными дюбелями

– постановка самонарезающих и самосверлящих винтов

– совместное пластическое деформирование кромок

– контактная точечная сварка

– электрозаклепки

– фальцовка продольных кромок

12. В вопросах на установление соответствия используются неоднородные объекты

(147). ЗАКОНЧИТЕ ОПРЕДЕЛЕНИЯ

Понятно, что, не зная формальных определений тех понятий, что в первом столбце, можно правильно ответить на все задание, так как понятия, включенные в эту группу, совершенно разнородны, и из предложенных вариантов можно легко найти им соответствующие определения.

Еще один пример нарушения требования однородности элементов:

(148). УСТАНОВИТЕ СООТВЕТСТВИЕ МЕЖДУ ТЕРМИНОМ И ЕГО ОПРЕДЕЛЕНИЕМ

(149). УСТАНОВИТЕ СООТВЕТСТВИЕ МЕЖДУ ТЕРМИНОМ И ЕГО ОПРЕДЕЛЕНИЕМ

(150). СОСТАВЬТЕ ПРАВИЛЬНЫЕ ПАРЫ (юридические дисциплины)

13. Нарушено требование взаимнооднозначного соответствия:

(151). СООТНЕСИТЕ ПОНЯТИЯ С ПЕРИОДАМИ ВРЕМЕНИ

(152). СООТНЕСИТЕ ДЕЙСТВИЯ С ФОРМАМИ ЭКОНОМИЧЕСКОЙ ИНТЕГРАЦИИ

Недопустимо при компьютерном тестировании использование одинаковых элементов («ХХ век» или «Общий рынок»), так как вероятность ошибки – 50 % (компьютерное тестирование тем и отличается от «бумажного», что реагирует на символы и фраза «ХХ век» из первой пары не заменит ту же фразу из третьей пары).

13. Отсутствие четкой инструкции в заданиях на установление последовательности. При этом задание искажается и превращается в нечто, похожее на выбор правильного ответа, например:

(153). ПРОВЕДЕНИЕ СПАСАТЕЛЬНЫХ РАБОТ ВКЛЮЧАЕТ:

1: Ведение разведки

2: Розыск пораженных в завалах и разрушенных зданиях

3: Ликвидацию и локализацию пожаров

4: Оказание первой медицинской помощи пострадавшим

5: Санитарную обработку людей

Автор имел в виду порядок проведения спасательных работ, как алгоритм действий, имеющих строгую последовательность, однако получилось простое перечисление видов работ, где все элементы имеют место.

Инструкцию к этому заданию следовало бы сформулировать так: «ПОРЯДОК ПРОВЕДЕНИЯ СПАСАТЕЛЬНЫХ РАБОТ»

В следующем задании непонятно, о каком порядке идет речь, как влияют перечисленные элементы на частоту профилактики:

(154). ЧАСТОТА ПРОФИЛАКТИКИ

1: число осмотров и ремонта аппаратуры

2: время вынужденного простоя

3: время исправной работы

(155). РАСПОЛОЖИТЕ В ПРАВИЛЬНОМ ПОРЯДКЕ

1: Аристотель

4: Рассел

2: Декарт

3: Гегель

В этом задании неясно, в каком именно порядке располагать фамилии: в алфавитном, хронологическом, по географии проживания (с запада на восток), по количеству созданных трудов, по продолжительности жизни и т. д.

14. Наличие одинаковых элементов в списке для упорядочивания.

(156). УКАЖИТЕ ПОСЛЕДОВАТЕЛЬНОСТЬ ВЫПОЛНЕНИЯ ИНФОРМАЦИОННОГО ПРОЦЕССА

1: Подготовка

2: Передача

3: Ввод

4: Корректировка

5: Обработка

6: Вывод

7: Корректировка

В этом задании слово «Корректировка» используется два раза, что создает ситуацию, когда при прочих верно расставленных элементах вероятность правильного ответа на это задание равна 50 %. Реагируя на символы, компьютер воспринимает по-разному элемент множества, стоящий на четвертом месте и на седьмом, хотя для испытуемого они одинаковы. Для того, чтобы убедиться в этом, можно по-разному набрать слово «корректировка» под каждым из этих номеров – «КОРРЕКТИРОВКА», «к о р р е к т и р о в к а», «Корректировка». Смысл для испытуемого не изменится, но компьютер воспринимает эти элементы как разные, переставлять их местами нельзя.