Что не так с некоторыми заданиями и тестами?
Замечено, что до 10% тестовых заданий в вузах могут иметь проблемы, из-за которых некоторые тесты почти невозможно выполнить без «ошибок».
Корень проблемы обычно в том, что тесты вносятся персоналом с ошибками, без должного внимания, без проверки, без базовых знаний о системе тестирования.
При обнаружении проблем к каждому конкретному заданию на этом сайте добавляется комментарий "Проблемное задание", и иногда краткое указание на суть проблемы, если она не очевидна и её удалось классифицировать.
Основные проблемы в порядке уменьшения частоты
Задан неверный тип задания (одиночный выбор вместо множественного и наоборот)
Одно и то же задание может встречаться в двух вариантах: с одиночным выбором и со множественным. По возможности рекомендуем знакомиться с тем них, который совпадает с типом задания из вашего теста, иначе польза от ответа будет минимальной или даже нулевой.
Составители тестов часто копируют готовые из книг, учебных пособий и из интернета. Иногда даже не сами, а привлекают для этого ресурс нерадивых студентов за зачёт. Проблема возникает в том, что тип задания при таком копировании часто теряется. Для заданий со множественным выбором это часто приводит к тому, что верным считается только один (случайный) из нескольких верных по сути ответов.
Обойти проблему можно путём "проб и ошибок", и так найти вариант, который считается верным. На этом сайте приводятся именно такие ответы, которые выяснены опытным путём в тесте определённого вуза.
Верных вариантов несколько, но выбрать можно только один
Составитель теста забыл про тип задания и отметил качестве эталона первый понравившийся (случайный) ответ. Вопрос подразумевает несколько ответов, но верным считается только один из них (номинально неизвестно какой)
Решение аналогично предыдущему, но есть оптимальное направление поиска: логично начинать поиск с наиболее очевидного варианта.
Верным считается вариант, который неверен по сути вопроса
Дав грамотный ответ, испытуемый получает 0 баллов, поэтому приходится выбирать ответ, который неверен по сути вопроса, но за который даются баллы, как за правильный.
Это наиболее неприятная проблема, т.к. о её невозможно предвидеть заранее и ошибка не распространяется на другие вузы, и на тесты других специальностей. При нахождении таких случаев, в комментариях делается соответствующая отметка (например: "в некоторых тестах верным считается такой-то ответ", "сверяйте название теста, темы и вуза" или "ответ не является верным по сути").
Любой ответ считается ошибкой
Ни один из вариантов не считается верным, ни верный (по сути), ни ошибочный. Любой ответ будет воспринят, как ошибка и за него невозможно получить балл.
Обход проблемы: много кратное выполнение теста в надежде, что в очередной попытке выпадет меньше таких заданий.
В разных темах, предметах, специальностях, вузах верными считаются разные ответы
На наиболее сложных заданиях составитель теста выбирает в качестве эталона ответ, который на первый взгляд показался ему правильным (само задание просто копируется откуда-нибудь).
Это случай, когда снова приходится сверять и предмет, и тему, и вуз, и характерные особенности пунктуации в тесте. Но и это не является залогом успеха. Кроме того, ошибку в тесте могут в любое время исправить (в реальности исправляют редко).
Задание морально устарело
Некоторые задания (особенно по теме законодательства) устаревают в течение нескольких лет. Но такие задания обычно никто не актуализирует, и верным считается ответ, который устарел на десятки лет.
Решение снова в универсальном способе перебора. Но также можно на основе текстов и дат из других заданий теста сделать предположение о годе составления задания (или диапазоне). На этот случай поисково-правовые системы содержат все устаревшие варианты законов, это может помочь найти ответ быстрее.
Верный ответ зависит от того, в каком году составлено задание, но этот год не назван
Примеры: Сколько субъектов РФ? На какой срок избирается президент? Имеется ли в настоящее время дефицит бюджета? Сколько стран входит в ЕАЭС? Какая шкала НДФЛ действует в РФ? Если попалось задание с подобными вопросами, то это лотерея.
Обход, опять же, путём проб и ошибок.
Нет формул, рисунков и прочих изображений
Задания для новых тестов преподаватели нередко заимствуют из имеющихся у коллег, но изображения с формулами и рисунками скопировать забывают. Это приводит к тому, что вопрос и варианты ответа неполные или вообще пустые и внешне нет ничего, на основе чего можно было бы осмысленно выбрать ответ.
Для обхода этой проблемы может помочь кнопка «посмотреть код» из контекстного меню (в десктопной версии браузера Chrome и других) или скрипт для отображения имён потерянных изображений (читать подробнее). Найденные названия файлов можно сопоставить их с эталонами ответа.
Варианты ответа не соответствуют вопросу, содержат мусор или разорваны
При составлении тестов методом «копипастинга» это бывает нередко. Одна часть скопировалась, другая — не скопировалась или скопировалась неверно. Условно «верным» в таких заданиях может оказаться любой случайный вариант, или таковой вообще может отсутствовать (т.е. все неверны).
Некоторые варианты ответа повторяются
Для испытуемого это означает, что за его верный ответ баллы могут быть начислены или не начислены с вероятностью 50%.
В большинстве систем тестирования (в том числе и в Moodle) нет контроля того, что в задании присутствуют одинаковые варианты ответа. Чаще всего удваивается именно верный вариант, однако из-за ошибки составителя только один из них считается верным, но неизвестно какой именно.
Что с этим делать?
1. Смириться
Самый простой и рабочий вариант, сохранит нервы.
2. Попытаться угадать ответ
Приемлемо, когда есть много попыток. В некоторых случаях этот скромный сайт поможет легче пережить проблему и победить систему, например, когда попыток слишком мало или просто некогда заниматься такой ерундой.
3. Обратиться в вуз, указав на задания с ошибками
В теории — это самый правильный вариант, но на практике всё бывает сложно. На этом самурайском пути многих ждут неудачи, потери и разочарования. До конца смогут дойти только самые пытливые и упрямые, готовые посвятить всего себя незначительной проблеме.
В случае «успеха» на специальности новоиспечённого самурая задание в тесте исправят, но на остальных специальностях тесты останутся с прежними ошибками в ожидании новых героев.Основная сложность в том, что у каждого вуза есть несколько десятков специальностей с копиями тестов, скопированных друг у друга и ещё неизвестно откуда. Поиск копий проблемных заданий в сложной и малопонятной системе является очень сложной задачей. Очевидно, никто не хочет возиться с исправлением нескольких десятков тестов и тратить на это несколько дней из-за одного надоедливого студента (особенно, если ошибки в тесте сделаны намеренно).
Так подходим к ещё одной стороне проблемы: работники отдельных вузов намеренно портят некоторый процент заданий в тестах, чтобы не было слишком много отличников. Это позволяет им искусственно формировать нормальное соотношение числа отличников, ударников и троечников. Как правило, к этой крайней мере прибегают, когда все ответы оказываются опубликованными в интернете в бесплатном доступе (из-за чего все студенты подряд выполняют их почти на 100 баллов), а заменить задания теста на новые нет желания или возможности. Справедлив и встречный вариант, когда изначально все задания для теста были взяты преподавателем из интернета, где были бесплатно указаны все верные ответы.
Такой подход кажется несправедливым по отношению к студенту, но в учебной среде подобные приёмы широко распространены с незапамятных времён. Например, почти любой студент-очник может поведать о "плане на отчисление", или плане "на ограничение числа стипендий", которые выполняют некоторые преподаватели на экзаменах. Для опытного преподавателя "завалить" даже отличника не составляет труда, был бы запрос. Логично, что похожая вынужденная мера есть и для студентов дистанционного обучения.
И это причина, по которой в интернете вредно публиковать бесплатные ответы на весь тест, — это работает против самих студентов (такой тест со временем заменят или просто испортят). Введение минимальной оплаты приводит к тому, что более 90% студентов полностью выполняют тесты сами и вся группа получает такие разнообразные оценки, которые не беспокоят преподавателей и не нарушают требуемого равновесия.
Спасибо за внимание. Удачных Вам тестов!)