Качество заданий проверяйте «неправильным» способом
Качество заданий проверяйте «неправильным» способом Коллеги, представим, что перед вами задание, которое уже выглядит хорошим. Но давайте это проверим «неправильным» способом. Нейросеть может за минуту собрать тест, карточки или рабочий лист, которые визуально выглядят вполне готовыми. Но есть ошибки, которые можно обнаружить, только если посмотреть на материал глазами ученика. ТРИ этапа проверки, которые важно сделать до урока: 1. Можно ли найти ответ, не зная темы? Особенно часто это происходит в тестах. Правильный вариант длиннее остальных. Два ответа явно нелепые. Один грамматически не подходит к вопросу. В формулировке уже спрятана подсказка. Тогда ученик демонстрирует не знание темы, а умение распознавать конструкцию теста. Проверка: закройте правильный ответ и посмотрите на остальные варианты. Мог ли каждый из них действительно выбрать ребенок, который допустил понятную ошибку? 📌 Исследования автоматической генерации тестов показывают, что языковые модели могут создавать формально корректные неверные варианты, но хуже воспроизводят реальные ошибки и заблуждения учеников. 2. Задания действительно становятся сложнее или они просто становятся длиннее? ИИ легко делает «три уровня сложности» так: 1-й уровень — короткий текст; 2-й уровень — текст длиннее; 3-й уровень — еще больше условий. Но объем информации и сложность мышления — не одно и то же. Ученик может трижды выполнять одинаковое действие, даже если материал становится более громоздким. Проверка: выпишите рядом только действия ученика. Например: найти • найти • найти — это не три уровня. Гораздо сильнее: найти • объяснить связь • применить в новой ситуации. Если меняется только количество текста, а способ мышления остается прежним, материал стоит переделать. 3. Ошибка ученика что-нибудь расскажет вам или просто даст «0 баллов»? Это одна из самых недооцененных проверок. Допустим, ребенок выбрал вариант Б. Что вы узнали? Он перепутал два понятия? Не увидел причинно-следственную связь? Применил правило не в тех условиях? Или вариант Б — просто случайный неправильный ответ? Если по ошибке невозможно понять, где именно сбилось рассуждение ученика, такое задание слабо помогает учителю принимать следующее педагогическое решение. Поэтому хороший неверный вариант — не просто «неправда». Он по возможности отражает правдоподобную ошибку мышления. 📌 Качество таких деталей считается одной из сложных частей автоматической генерации тестовых заданий. Сохраните эти три критерия и обязательно поделитесь ими с коллегами. ❗️ Они особенно полезны для тестов, карточек и рабочих листов, созданных с помощью ИИ.