Как создать тест нейросетью: она составила 10 вопросов по тексту за 45 секунд

Мы проверили, как создать тест нейросетью по готовому тексту. Дали Yenisei параграф о Солнечной системе и попросили составить 10 вопросов с вариантами ответа и ключом. Через 45 секунд тест лежал в файле Word. Все десять ответов в ключе верны. Потом нейросеть проверила работу ученика и сделала второй вариант теста.

Как ИИ составляет тест по тексту

Текст параграфа занимал около двух тысяч знаков и лежал в обычном текстовом файле. Просьба была такой:

Прочитай файл с текстом параграфа и составь по нему тест из 10 вопросов с четырьмя вариантами ответа, верный один. Спрашивай только о том, что есть в тексте. В конце дай ключ с ответами. Сохрани тест в файл Word.

Нейросеть попросила разрешения прочитать файл и составила тест. Вот два вопроса из десяти:

1. Почему Венера — самая горячая планета? А) Она ближе всех к Солнцу Б) Из-за плотной атмосферы из углекислого газа В) На её поверхности много вулканов Г) Она состоит из раскалённого металла

1. За какое время свет проходит расстояние от Солнца до Земли? А) Примерно за 8 минут 20 секунд Б) Примерно за 1 минуту В) Примерно за 1 час Г) Примерно за 24 часа

Мы сверили тест с текстом. На каждый вопрос в параграфе есть ответ, и ключ везде указывает верный вариант.

Тест с помощью ИИ: проверка ответов ученика

Следом мы дали нейросети ответы ученика с двумя ошибками:

Ученик ответил так: 1-Б, 2-А, 3-А, 4-Б, 5-Г, 6-Б, 7-А, 8-В, 9-Б, 10-В. Проверь по ключу, посчитай баллы и напиши, что ему повторить.

Нейросеть нашла обе ошибки: во втором вопросе ученик назвал ближайшей к Солнцу планетой Венеру, в пятом ошибся с температурой на её поверхности. Она объяснила, откуда могла взяться путаница, и перечислила, что повторить: порядок планет и причину, по которой Венера горячее Меркурия.

Как попросить ИИ составить второй вариант теста

В первом варианте мы заметили закономерность: верный ответ ни разу не стоял под буквой Г. Мы попросили это исправить:

В ключе верный ответ ни разу не стоит под буквой Г. Сделай второй вариант теста: те же вопросы в другом порядке, варианты ответов перемешай так, чтобы верный ответ встречался под каждой буквой. Отдельным файлом Word, с ключом.

Через 21 секунду появился второй файл. Порядок вопросов в нём другой, а верные ответы распределены так: два раза А, три раза Б, два раза В и три раза Г. Ключ второго варианта мы проверили программой: все десять ответов верны.

Где нейросеть ошиблась

В первом варианте верный ответ стоял под буквами А, Б и В и ни разу под буквой Г. Внимательный ученик заметит это и не станет выбирать четвёртый вариант.

Что учесть

• Тест охватил не весь текст. Про пояс астероидов, газовые гиганты и Плутон в нём нет ни одного вопроса. Если нужны вопросы по каждому разделу параграфа, об этом стоит написать в просьбе.
• Нейросеть работает только с тем текстом, который ей дали. Ошибки в самом параграфе она в тест перенесёт.

Где работает ИИ для тестов

Мы проверяли в приложении Yenisei Агент для Windows, macOS и Linux. Оно читает текст из файла и сохраняет тест файлом Word в папку на компьютере. В Yenisei Чате текст параграфа можно вставить прямо в сообщение, ставить ничего не нужно. VPN не требуется.

Как нейросеть готовит план урока и рабочий лист, мы показали в статье «ИИ для учителей».

Что выбрать

• Тест по короткому тексту — чат в браузере: вставьте текст в сообщение.
• Тест по файлу и несколько вариантов — Yenisei Агент. Варианты сохраняются отдельными файлами Word.
• Тест, который пойдёт в класс — сверьте ключ с текстом и посмотрите, под какими буквами стоят верные ответы.