Умное оценивание
Эта статья поможет вам включить AI Grading для вопросов с кратким ответом и вопросов с несколькими краткими ответами в викторине. Задайте балльные критерии, позвольте системе оценить отправленные ответы, затем просматривайте и изменяйте оценки в Batch Grading.
Обзор
Открытые экзаменационные вопросы обычно нужно читать и оценивать по одному. AI Grading сопоставляет каждый ответ с заданными вами балльными критериями и автоматически присваивает оценку. Затем вы можете просматривать результаты по вопросу или по респонденту, чтобы оценивание оставалось единообразным и требовало меньше повторного чтения.
Сценарии использования
- Оцените много кратких ответов по одним и тем же критериям, затем выборочно проверьте результаты.
- Повторно используйте уже написанное вами пояснение к ответу как стандарт оценивания.
- Задайте отдельный стандарт для каждой строки, если вопрос с несколькими краткими ответами требует разных критериев.
Доступ к функции
AI Grading доступен для вопросов Short Answer и Multiple Short Answer в викторине. Он выключен, пока вы не включите его.
1. Создайте викторину и добавьте вопрос Short Answer или Multiple Short Answer.
2. Откройте настройки вопроса и найдите AI Grading.
3. Включите его. Пока вы этого не сделаете, оценивайте этот вопрос вручную в Batch Grading.
Задайте стандарт для краткого ответа
После включения напишите критерии, которые AI должен использовать. Это может быть пояснение к ответу, правильный ответ или требования к ответу.
1. Введите балльные критерии в стандарт оценивания.
2. Если вы уже написали пояснение к ответу, задайте его как стандарт оценивания одним щелчком.
3. Сохраните вопрос. После отправки ответа участником система оценит ответ по этому стандарту.
Задайте стандарт для Multiple Short Answer
Вопрос Multiple Short Answer оценивается по строкам. Введите стандарт оценивания для каждого заголовка строки.
1. Включите AI Grading для вопроса.
2. Под каждым заголовком строки введите балльные критерии для этой строки.
3. Сохраните. Система сопоставит и оценит каждую строку по собственному стандарту.
Посмотреть автоматическую оценку
После отправки ответа участником вопросы с AI Grading оцениваются автоматически. В ответе отображается AI grading. AI-оценивание требует определённого времени, поэтому ответы не генерируются мгновенно.
В Batch Grading такие вопросы помечаются значком AI grading, чтобы вы могли отличать их от вопросов, которым ещё требуется ручная оценка.
Просмотр и изменение оценок
Когда оценивание завершится, откройте Batch Grading и проверьте оценки. Используйте те же пункты, что и при ручном оценивании: нажмите Batch Grading в правом верхнем или левом нижнем углу View/Download Responses, либо в левом нижнем углу диалога расшифровки.
1. Переключайтесь между Grade by question и Grade by examinee.
2. Откройте Graded, чтобы увидеть вопросы, которые AI уже оценил.
3. Чтобы изменить оценку, отредактируйте её напрямую в Graded и сохраните.
4.If the scoring standards have been modified, you can click AI Re-grading on marked questions to initiate re-evaluation.
When marking by question, click AI Re-grading at the top right corner to re-mark all already graded answers under this question.
When marking by examinee, click **AI Re-grade** beside the relevant question to trigger re-marking for this question.
Оценка ранее собранных ответов
Если ответы поступили до того, как вы включили AI Grading, вернитесь в редактор викторины, задайте стандарт и включите AI Grading. Что произойдёт дальше, зависит от того, продолжает ли викторина собирать ответы.
1. Викторина всё ещё собирает ответы: уже собранные ответы оцениваются автоматически.
2. Сбор остановлен: откройте Batch Grading. У вопроса отображается пункт AI Grading. Нажмите на него, чтобы оценить собранные ответы для этого вопроса.
Квота на оценивание
Бесплатный аккаунт включает 20 использований AI grading. После этого обновите тариф: ежемесячный план включает 500 использований, а годовой — 6 000 использований.
Когда квота заканчивается, викторина прекращает автоматическое оценивание. Оценивайте эти вопросы вручную в Batch Grading.
Важные примечания
- AI Grading применяется только к вопросам Short Answer и Multiple Short Answer в викторине и выключен, пока вы его не включите.
- Для Short Answer введите стандарт или примените пояснение к ответу одним щелчком. Для Multiple Short Answer задайте стандарт для каждого заголовка строки.
- Проверяйте оценки AI в разделе Graded внутри Batch Grading. Там же вы можете изменить оценку.
- Если вы позже включите AI Grading, викторина, которая всё ещё собирает ответы, автоматически оценивает уже существующие ответы. Если сбор остановлен, нужен пункт AI Grading в Batch Grading.
- Бесплатные аккаунты включают 20 использований, ежемесячный план — 500, а годовой — 6 000. Когда квота заканчивается, оценивайте вручную.
Часто задаваемые вопросы
Почему ответ не был оценён автоматически?
Убедитесь, что вы включили AI Grading для этого вопроса и сохранили стандарт оценивания. Автоматическое оценивание также прекращается, когда заканчивается квота.
Могу ли я изменить оценку, которую выставил AI?
Да. Откройте Graded в Batch Grading и отредактируйте оценку для этого вопроса.
Будут ли оценены ответы, отправленные до того, как я включил эту функцию?
Да. Если викторина всё ещё собирает ответы, эти ответы будут автоматически оценены после сохранения настройки. Если сбор остановлен, откройте Batch Grading и нажмите AI Grading для этого вопроса.
Чем Multiple Short Answer отличается от Short Answer?
Для Short Answer используется один стандарт оценивания, и вы можете применить пояснение к ответу одним щелчком. Для Multiple Short Answer нужен стандарт для каждого заголовка строки.
Что произойдёт с вопросами, которые уже используют AI Grading, если у меня закончатся использования?
Викторина остановит автоматическое оценивание. Обновите тариф или оцените эти вопросы вручную в Batch Grading.
