58 тисяч студентів перескладатимуть іспит через проблеми з ШІ-наглядом

Зафіксовано 5-кратне зростання найвищих балів.

58 тисяч студентів перескладатимуть іспит через проблеми з ШІ-наглядом 1 58 тисяч студентів перескладатимуть іспит через проблеми з ШІ-наглядом 2

На початку літа майже 160 000 абітурієнтів складали вступний іспит до UNAM, найбільшого університету Мексики. Вперше це відбулося повністю дистанційно, з використанням браузера з функцією блокування та програмного забезпечення для нагляду з використанням ШІ, протягом кількох тижнів з кінця травня до початку червня.

Це виявилося катастрофою.

За результатами іспиту, вони мало чим нагадували попередні, особливо у верхньому діапазоні. У період з 2021 по 2025 рік 3,5% учасників тесту набрали 100 або більше балів зі 120 питань тесту UNAM. Цього року таких було 16,3%.

Ситуація була ще гіршою серед найуспішніших. З 2021 по 2025 рік 0,9% учасників тесту набрали 110 або більше балів; цього року таких було 5,5%.

Сплеск високих балів спричинив звинувачення у масовому шахрайстві, і UNAM призначив комісію експертів для розслідування ситуації.

Група отримала громіздку назву “la Comisión Técnica de Personas Expertas para la Revisión del Proceso de Selección de Ingreso a Licenciatura para el Ciclo Escolar 2026-2027/1” (Технічна комісія експертів для перегляду процесу відбору для вступу на бакалаврат на 2026-2027/1 навчальний рік) і щойно подала свої рекомендації. Комісія вважає, що найкращим шляхом уперед, враховуючи всі занепокоєння, є проведення “контрольного іспиту” — тобто, абітурієнтам доведеться скласти ще один тест, і вони робитимуть це особисто.

Цей контрольний іспит стосуватиметься не лише тих, хто отримав місце в UNAM за результатами цьогорічного тесту, а й усіх, хто мав бути прийнятий на основі мінімальних успішних балів за своєю програмою навчання з 2021 року. Близько 58 000 людей можуть бути залучені, і місця в UNAM тепер залежатимуть від результатів нового тесту. (Деталі контрольного іспиту мають з’явитися незабаром; заняття заплановані на 10 серпня, тому все доведеться пришвидшити, якщо університет не вирішить відкласти початок навчання).

За даними Gaceta UNAM, офіційного видання університету, ректор університету вибачився перед чесними абітурієнтами, оскільки їм доведеться знову готуватися та складати тест, хоча вони нічого не зробили неправильно. Однак, контрольний іспит “необхідний для забезпечення впевненості та гарантування справедливості доступу”, додав ректор.

Ніхто ще не знає, які види шахрайства могли мати місце. Тест був з множинним вибором, а не есе, тому складно шукати типові ознаки шахрайства за допомогою ШІ (повні відповіді, які одразу вставляються в текстові поля тощо). Також можливо, що студенти використовували шпаргалки, витоки питань та інші традиційні методи шахрайства.

У звіті New York Times минулого тижня про скандал із шахрайством зазначалося, що “поради щодо шахрайства широко розповсюджувалися до початку тестів навесні. Онлайн-акаунти радили студентам розміщувати монітори за межами поля зору веб-камери, де вони могли б отримати доступ до ChatGPT або інших моделей ШІ. Інші пропонували ховати навушники під волоссям або найняти когось іншого для складання іспиту поза камерою”.

Оскільки цьогорічний іспит проводився дистанційно, абітурієнти повинні були встановити та використовувати продукти безпеки, які намагалися захистити цілісність тестування. У звіті El País зазначено, що для тестування потрібен був LockDown Browser від Respondus. За даними компанії, після початку іспиту в цьому браузері студенти “не можуть друкувати, копіювати, переходити на інші веб-адреси або запускати інші програми на комп’ютері. Також заборонені пошук в Інтернеті, миттєві повідомлення, мінімізація браузера та сотні інших функцій. Після завершення іспиту студентам дозволяється вийти з браузера, і їхній комп’ютер повернеться до нормального стану”.

UNAM також використовував систему нагляду від Territorium, яка відстежувала веб-камеру кожного учасника тесту за допомогою алгоритмів ШІ. Система відстежувала ознаки того, що інша особа зайняла місце абітурієнта перед комп’ютером, використання мобільних телефонів або навушників, або навіть вихід абітурієнта з поля зору камери. Тест також мав одного людського наглядача на кожні 150 абітурієнтів; наглядачі отримували сповіщення від системи та могли повідомляти офіційних представників UNAM про невідповідності.

Ці заходи, здається, не спрацювали належним чином. (UNAM скасував майже 2% від загальної кількості іспитів через невизначені проблеми з поведінкою, тому, очевидно, когось таки спіймали.) Навіть UNAM визнав “ймовірність того, що значна кількість абітурієнтів могла отримати допомогу” на тесті. Експерт зі штучного інтелекту Рауль Рохас, спілкуючись з NPR, сказав, що статистичне моделювання показало, “що майже половина студентів шахраювали під час складання іспиту онлайн”.

Тепер майже 58 000 абітурієнтів повинні спробувати ще раз в офіційній аудиторії, під наглядом людини.

58 тисяч студентів перескладатимуть іспит через проблеми з ШІ-наглядом 3

Оригінал статті: arstechnica.com

Залишити відповідь

Ваша e-mail адреса не оприлюднюватиметься. Обов’язкові поля позначені *