Исследование и обоснование

Зачем учителю несколько вариантов одного задания, какие риски есть у ручной и ИИ-подготовки и как их закрывает TeacherFlow.

Эта статья собирает продуктовое и методическое обоснование TeacherFlow для заказчика и партнёров. Это обзор открытых источников и устоявшейся школьной практики; краткая выжимка — в разделе Исследования и доказательная база.

Метод и ограничения

Подготовлен кабинетный обзор (desk research): публикации по параллельным формам тестов, автоматической генерации заданий (AIG), таксономии Блума, когнитивной нагрузке, рискам LLM в образовании, опыту массовых EdTech-решений. Массовых интервью с учителями на этапе хакатона не проводилось — соло-формат без доступа к школам.

Что из этого следует: рамка проблемы и рисков подтверждена литературой и практикой; конкретные цифры экономии времени и удовлетворённости учителей нужно получить в пилоте (см. План развития). В материалах для заказчика мы не приводим непроверенных процентов «экономии».

Зачем учителю несколько вариантов

В школе несколько параллельных вариантов одного задания — обычный инструмент:

  1. Антисписывание на контрольных и самостоятельных.
  2. Пересдачи — ученик не должен решать тот же лист повторно.
  3. Индивидуальная работа — у пропустивших или отстающих своё задание, не копия соседа.
  4. Дифференцированный контроль — разные числа и контексты при одной когнитивной нагрузке.

В России это связано с контрольными, самостоятельными, ВПР, ОГЭ и ЕГЭ. В обычном классе часто делают 2–4 варианта (по рядам); на централизованных экзаменах — большие банки заданий.

Психометрический контекст

В классической теории тестов строго параллельные формы (одинаковые истинные баллы и ошибки измерения для всех) на практике почти недостижимы. В школе работают содержательно параллельные формы: та же тема, тот же алгоритм решения, то же число шагов, та же форма ответа, но другие числа и контекст.

TeacherFlow автоматизирует как раз содержательно параллельную генерацию с прозрачной проверкой, а не заменяет полноценную калибровку по ответам тысяч учеников.

Как учители делают это сегодня

Типичный процесс: взять эталон → скопировать 2–4 раза → поменять числа, имена, контекст → проверить ответы и решаемость → оформить для печати. По обзору литературы и гипотезам команды это занимает от десятков минут до часа в зависимости от типа задачи; точные замеры — задача пилота.

Как обычно варьируют задания

В методике и в литературе по автоматической генерации заданий выделяют устойчивые приёмы:

ПриёмПримерРиск при неосторожности
Замена чиселДругие коэффициенты в уравненииДругой порядок величин → другая сложность
Смена контекста«Поезд» → «автобус»Контекст может интуитивно усложнить задачу
Синонимы в условииПереформулировкаСлучайно изменить ключевой термин
Имена, единицыМинимальный рискОбычно безопасно
Порядок пунктовПерестановка условийМожет сломать логику, если шаги связаны

Современные LLM умеют генерировать тексты заданий, но без контроля дают дрейф сложности, фактические ошибки в условиях и совпадение ответов между вариантами. Даже у крупных EdTech-проектов тьюторинга для учеников встречаются публичные замечания к качеству вычислений модели — генерация требует валидации.

Шесть барьеров, которые закрывает продукт

1. Неравная сложность. Ученики с «лёгким» и «тяжёлым» вариантом получают несопоставимые оценки. Контроль: профиль сложности и проверка «сопоставимо / легче / сложнее».

2. Нерешаемые условия. После замены чисел — деление на ноль, противоречие в данных. Контроль: предметные запреты в политиках, смысловые проверки.

3. Трудоёмкая проверка ИИ. Учитель не доверяет «пяти вариантам из чата» и перепроверяет всё. Контроль: прозрачный профиль, три проверки, бейджи и причины — править только спорное.

4. Потеря дидактической цели. Задача на дроби превращается в задачу на другое действие. Контроль: инварианты эталона и проверка структуры.

5. Совпадение ответов. Два варианта с одним ответом не защищают от списывания. Контроль: сравнение всех вариантов комплекта сразу.

6. Смещения одной модели. Одна «оценка сама себя» ненадёжна. Контроль: три разных проверки с разными задачами плюс жёсткие числовые пороги.

Подробности реализации — в Методологии контроля сложности.

Существующие решения и ниша TeacherFlow

  • Тьюторинг для ученика (диалог с ИИ, домашняя помощь) — другая задача: помогает ученику, а не готовит раздаточный материал учителю.
  • Шаблонные генераторы листов — хороши для шаблонной арифметики, слабы на текстовых задачах и смысле.
  • Универсальный чат — быстрый, но без фиксации инвариантов, без проверки коллизий ответов, без экспорта и истории комплектов.

Ниша TeacherFlow: pipeline генерация + валидация + рабочий кабинет учителя (библиотека, PDF/Word, класс, ссылки), заточенный под параллельные варианты одной сложности.

Приоритетные сценарии

Контрольная за несколько минут. Учитель загружает скан или текст → получает 3–4 варианта → смотрит отличия и предупреждения → печатает PDF.

Пересдача. Из библиотеки — ещё один вариант той же сложности, которого ученик не видел.

Дифференциация по английскому. Один грамматический навык, разная лексика в контексте — с фиксацией грамматики в политике предмета.

Раздача пропустившим. Персональные ссылки на read-only варианты без ответов в открытом доступе.

Выводы для заказчика

  1. Проблема реальна и устоялась в школьной методике.
  2. Строгая психометрическая эквивалентность не требуется для ценности продукта; нужна прозрачная сопоставимость по осям.
  3. Риски LLM-генерации известны и закрываются архитектурой TeacherFlow, а не «доверием к модели».
  4. Пилот в школе нужен для цифр времени, удовлетворённости и доработки порогов — это следующий совместный шаг после демо-версии.