Искусственный интеллект подвел учеников Массачусетса: сбой в оценке эссе MCAS выявил проблемы с качеством образования

В Массачусетсе около 200 школьных округов столкнулись с проблемой некорректной оценки эссе в рамках системы оценивания MCAS (Massachusetts Comprehensive Assessment System) из-за сбоев в алгоритмах искусственного интеллекта. Как сообщает NBC Boston, примерно 1,400 тестов получили низкие оценки, в том числе некоторые эссе были выставлены с нулевой оценкой, хотя по пятибалльной шкале они могли бы получить до шести баллов.

Департамент начального и среднего образования Массачусетса (DESE) подтвердил, что все затронутые эссе были повторно оценены, а округа, в которых были зафиксированы ошибки, были уведомлены о внесенных поправках. Все данные были обновлены в августе этого года. Тем не менее, результаты statewide MCAS, опубликованные в конце прошлого месяца, показывают, что проблемы обучения, возникшие во время пандемии COVID-19, по-прежнему являются серьезным вызовом для школьников на всех уровнях образования в штате.

Представители DESE объяснили, что сбои в оценивании произошли в результате «временной технической проблемы,» при этом ошибка затронула лишь небольшую долю из приблизительно 750,000 эссе MCAS, оцененных по всей территории Массачусетса. Искусственный интеллект использовался для помощи в оценке тестов на протяжении последних двух лет, однако около 10% работ перепроверяются людьми для гарантии единообразия в оценивании.

Эти сбои в оценивании происходят на фоне неоднозначного решения жителей Массачусетса, которые проголосовали против введения пороговых требований по компетенции в тестах MCAS как обязательного условия для получения аттестата о среднем образовании. Почти 60% избирателей на прошедшем голосовании отклонили стандарт, действовавший на протяжении двух десятилетий.

Состоящий в данный момент в разработке Совет по выпускным требованиям K-12 штата рассматривает возможность возвращения некоторых видов стандартизированных аттестационных работ по основным предметам, чтобы определить, имеет ли ученик право на получение диплома о среднем образовании. В качестве одной из рекомендаций Совета предлагается включить в новые стандарты элементы «конечных оценочных работ,» которые должны быть «разработаны, проведены и оценены государством, что позволит установить единый стандарт по всему Массачусетсу.»

По данным исследовательского центра Education Week, 25% учащихся в США показали низкие показатели в чтении и математике по результатам последнего исследования пропусков в обучении в условиях пандемии. Массачусетс, который в прошлом был одним из лидеров образовательных стандартов в стране, теперь сталкивается с серьезными вызовами, требующими незамедлительных решений, чтобы обеспечить качество образования для будущих поколений.

Ситуация с неправильной оценкой экзаменов подчеркивает важность гарантии качества оценки в системе образования и необходимость строгого надзора за технологиями, которые становятся всё более основными в образовательном процессе. Учитывая, что современные системы оценки опираются на алгоритмы искусственного интеллекта, должны быть внедрены дополнительные меры по обеспечению их надежности и долговечности.