Как использовать нейросеть как редактор готового теста: проверить единственность ответа, ясность формулировки и ключ на примере дробей до выдачи ученикам.
Андрей
Преподаватель, научный редактор
6 мин чтения
Коротко: перед раздачей теста попроси нейросеть проверить не ответы учеников, а сами задания: один ли правильный вариант там, где обещан один, хватает ли данных и не подсказывает ли формулировка ключ. Для каждого замечания требуй точную цитату вопроса и объяснение. Затем учитель проверяет исправленный ключ вручную. Ниже — авторский пример по дробям и схема редактуры, а не отчёт о реально отправленном в чат тесте.
Учитель распечатал проверку по дробям. Первый вопрос: «Какой вариант равен 0,5? Выберите один ответ». Варианты: А — 1/2, Б — 50%, В — 0,5, Г — 1/5. Успешный ученик может выбрать три ответа и получить ошибку по ключу. Нужен не новый генератор тестов, а нейросеть редактор теста, которая поможет заметить дефект до урока. Я бы сначала исправил этот вопрос сам: слишком заметная проблема служит хорошей проверкой того, как устроен весь остальной набор.
Что редактировать в тесте до проверки знаний?
У задания есть несколько слоёв. Содержание должно соответствовать теме. Инструкция должна честно говорить, сколько ответов выбрать. Варианты должны отличаться по смыслу, а ключ — содержать только то, что следует из условия. Если проблема в одном слое, красивая правка другого её не решит. Замена «Какой» на «Укажите» не делает три верных числа одним.
Я раскладываю вопрос в таблицу. Она пригодится и для литературы, и для географии, хотя проверять факты там придётся по своему учебнику:
Слой · Вопрос редактора · Пример проверки
Инструкция — Сколько ответов разрешено выбрать? — «Один» не совпадает с тремя равными 0,5 вариантами
Условие — Даны ли все необходимые сведения? — Указано число, с которым сравнивают
Варианты — Нет ли повторов под разной записью? — 1/2, 50% и 0,5 равны
Ключ — Проверен ли вручную каждый вариант? — А, Б и В верны в исходном вопросе
Для исправления есть два честных пути. Можно написать «Выберите все записи числа 0,5» и предусмотреть несколько ответов. Можно сохранить инструкцию «один» и заменить Б и В на другие числа, например 1/5 и 3/5, оставив 1/2 единственно верным. Какой путь лучше, зависит от цели урока. Если проверяешь перевод между дробью, процентом и десятичной записью, множественный выбор уместнее. Если проверяешь только сравнение дробей, второй вариант проще.
Как попросить нейросеть проверить готовый тест?
Лучше передавать не ответы детей, а обезличенный текст заданий. В LibraChat файл с тестом можно отправить в диалог и попросить пройтись по формулировкам вопросов. Для небольшого теста можно также вставить вопросы текстом. Я бы дал отдельную инструкцию: «Проверь каждый вопрос теста для шестого класса. Не отвечай за ученика и не создавай новый тест. Для каждого спорного вопроса процитируй фрагмент, укажи тип дефекта: инструкция, недостаток данных, несколько верных ответов или неверный ключ. Предложи минимальную правку и объясни, как её проверить вручную». Это предлагаемый запрос; результатов вызова в статье нет.
Почему минимальную правку? Если модель перепишет всю контрольную, учитель потеряет связь с темами, которые действительно проходили. Замечание вида «варианты Б и В тоже равны 0,5» можно проверить за секунды и исправить локально. Замечание вида «сделайте вопросы интереснее» не помогает проверить ключ. Поэтому я прошу показывать конкретный фрагмент и не принимать общий комплимент тесту как редактуру.
Перед отправкой я бы удалил из файла имена учеников, оценки и другие сведения, не нужные для проверки текста. Редактору достаточно вопросов и авторского ключа; таблицу детских ответов оставь вне этого диалога. Если же после урока требуется анализ результатов, это другая работа; она описана в материале об анализе теста. Редактура до урока не может предсказать, где ошибутся живые дети, но может убрать несправедливые ловушки, созданные самим заданием.
Как проверить совет нейросети вручную?
Сделай отдельную копию теста и исправляй по одному вопросу. Для примера с 0,5 математическая проверка проста: `1/2 = 0,5`, `50% = 0,5`, десятичная запись `0,5` совпадает сама с собой, а `1/5 = 0,2`. Если новая версия допускает только один ответ, перепиши ключ. Если допускает несколько, проверь, как система подсчёта будет ставить балл за частичный выбор. Иначе исправленный текст всё равно может стать несправедливой оценкой.
Я бы повторил четыре проверки на каждом спорном пункте:
Прочитал вопрос без вариантов и сформулировал правильный ответ самому.
Подставил каждый предложенный вариант и отметил, почему он подходит или нет.
Сверил формулировку с тем, что реально проходили на уроке.
Дал коллеге или одному взрослому читателю пройти тест без объяснений автора.
Последний шаг выявляет скрытые подсказки и странные слова. Если коллега спрашивает «а можно выбрать два?», инструкция всё ещё неясна. Если математически неверный вариант выглядит правдоподобно, это хорошо для диагностики только тогда, когда неверность можно объяснить. Не стоит ловить ученика на случайной опечатке автора.
Отдельно посмотри на сложность языка. Фраза «равносильные представления рациональной величины» может быть точной для методиста, но не для шестиклассника, который только сравнивает дроби. Редактору можно поручить предложить простую формулировку, однако педагог решает, не исчезло ли вместе с трудным словом само проверяемое понятие. Слишком простая подсказка в условии тоже исказит результат.
Перед печатью я бы оставил на первой странице учительской копии маленький журнал правок:
номер задания и прежнюю формулировку;
что именно изменено: инструкция, вариант или ключ;
короткое основание, например «три ответа равны 0,5»;
дату последней ручной проверки.
Этот журнал не нужен ученику. Он помогает учителю объяснить исправление коллегам и не раздать случайно старую версию файла. Особенно досадно найти верный ключ после того, как листы уже лежат на партах: тогда придётся решать, как оценивать несколько правильных ответов задним числом.
Для серии таких правок достаточно обычного текстового диалога; актуальные лимиты и доступность приложенных документов сверяй в тарифах LibraChat. Я не обещаю, что модель найдёт все ошибки или сама утвердит справедливый ключ. Это обязанность автора теста. Хорошая редактура оставляет учителю понятный список изменений и основания для каждого.
Прямо сейчас возьми один вопрос из собственного теста и выпиши все варианты, которые действительно верны. Если их больше, чем позволяет инструкция, исправь формулировку или варианты до отправки классу. Затем предложи нейросети проверить остальные вопросы тем же способом и не принимай ни одну правку без ручной подстановки ответа.
