Дослідження: ШІ-боти справляються з CAPTCHA краще за людей
Штучний інтелект на 15% успішніше справляються із проходженням CAPTCHA, ніж живі люди. Такого висновку дійшли автори дослідження , на яке звернув увагу Quartz .
Експеримент був проведений групою фахівців із Microsoft, Швейцарської вищої технічної школи Цюріха, Каліфорнійського університету в Ірвайні та Ліверморської національної лабораторії.
У дослідженні взяли участь 1400 осіб, яким було запропоновано пройти тести на захист від роботів, які використовуються на 120 популярних ресурсах. Результати фахівці порівняли з показниками, які продемонстрували різноманітні роботи.
«Точність роботів коливається в межах 85-100%, причому у більшості вона перевищує 96%. Це істотно краще за показник, що спостерігається у людини (50–85%)», — йдеться у статті, опублікованій за підсумками експерименту.
Живі люди, за даними дослідників, можуть конкурувати з ШІ лише за проходження reCAPTCHA. Середньостатистичний користувач справляється із цим завданням за 18 секунд. У роботів на це йде 17,5 секунди.
В інтерв’ю для New Scientist результати дослідження прокоментував один із його авторів Джин Цудік. На його думку, вони свідчать, що технологія захисту від роботів перестала справлятися зі своїми завданнями і тепер приносить лише незручності.
“Всі ми знаємо, що ніхто не любить подібні тести. Для цього не потрібно проводити дослідження. Але не всі знають, чи варті зусилля, які ми прикладаємо для проходження CAPTCHA щодня, місяць, рік», — нарік учений.
Нагадаємо, в липні аналітики Стенфорда та Каліфорнійського університету опублікували дослідження, в якому стверджується, що новітні моделі чат-бота ChatGPT стали працювати гірше після спілкування з живими користувачам. Зокрема ще в березні цього року остання версія штучного інтелекту ідентифікувала прості числа з точністю 97,6%. До червня цей показник упав до 2,4%.