Некорректная оценка эссе в Массачусетсе: искусственный интеллект провалил тесты MCAS
В Массачусетсе более 200 округов столкнулись с серьезной проблемой в оценке эссе в рамках системы оценки Massachusetts Comprehensive Assessment System (MCAS). Как сообщает NBC Boston, около 1 400 эссе оказались неправильно оценены из-за сбоя в работе алгоритмов искусственного интеллекта, использующегося для автоматизированной оценки. В результате некоторые работы получили нулевую оценку, тогда как по шкале от 1 до 7 должны были быть оценены на уровне 6.
Министерство начального и среднего образования Массачусетса (DESE) подтвердило информацию, заявив, что все затронутые эссе были переоценены, а школы получили уведомления об исправлениях данных в августе. В результате недавнего анализа результатов MCAS стало очевидно, что последствия пандемии COVID-19 все еще создают серьезные проблемы в обучении учащихся на всех уровнях образования в штате.
Согласно данным DESE, проблемы с оцениванием возникли из-за «временной технической неисправности в процессе» и составляют лишь небольшую долю от общего числа эссе — около 750 000, представленных по всей системе. Для обеспечения согласованности оценки примерно 10% всех эссе дополняются ручной проверкой.
Данный инцидент на фоне недавнего голосования, в котором большинство жителей штата проголосовали против введения стандартов оценки на тестах MCAS как условия для получения выпускного аттестата. Почти 60% голосовавших в прошлом году отвергли эту норму, действовавшую в штате на протяжении двух десятилетий.
Кроме того, в данный момент в штате разрабатывается К-12 Совет по выпускным требованиям, который может вернуть какие-либо стандартизированные «итоговые оценочные тесты» по ключевым предметам, чтобы определить, соответствует ли студент требованиям для получения диплома о среднем образовании.
Проект рекомендаций Совета включает положение о «итоговых оценочных тестах», которые будут «разрабатываться, проводиться и оцениваться на уровне штата, что позволит установить единые стандарты». Это может стать важным шагом в повышении качества образования и объективности оценки.
Ситуация подчеркивает растущую зависимость образования от технологий и необходимость надлежащего контроля и проверки их работы. В условиях постоянных изменений и неуверенности в последствиях пандемии, такие сбои могут иметь долгосрочные последствия для будущих поколений студентов.
Необходима тщательная работа по улучшению системы оценивания, поскольку качество образования и его справедливость остаются первоочередными задачами для властей Массачусетса.
