Шість інноваційних моделей штучного інтелекту не змогли успішно пройти математичні тести, продемонструвавши найвищий результат лише на рівні 2%.

Математики розробили нові задачі, щоб випробувати навички міркування шести передових моделей штучного інтелекту. Проте ШІ провалили майже всі тести.

Сучасним моделям штучного інтелекту важко розв'язувати математичні задачі дослідницького рівня. І навіть найдосконаліші системи ШІ здатні вирішити лише 2% із сотень проблем, з якими стикаються, пише LiveScience.

Згідно з інформацією, наданою дослідницьким інститутом Epoch AI, математикам із докторським ступенем для розв'язання складних математичних задач часто потрібно витратити години або навіть дні. Водночас, найсучасніші моделі штучного інтелекту змогли дати правильні відповіді лише на менше ніж 2% з цих викликів.

За останнє десятиліття було розроблено низку тестів для ШІ. І у багатьох випадках моделі штучного інтелекту легко проходять ці тести, кажуть науковці. Наприклад, у стандартному тесті MMLU (Measuring Massive Multitask Language Understanding) сучасні моделі ШІ відповідають на 98% математичних задач правильно.

Основна мета більшості з цих тестів полягає в оцінці навичок штучного інтелекту у виконанні математичних задач, характерних для середньої школи та навчальних закладів вищого рівня. Про це повідомляє Елліот Глейзер, математик компанії Epoch AI.

Однак новий тестовий комплекс, відомий як FrontierMath, націлений на підвищення рівня аналітичного мислення. Компанія Epoch AI створила ці питання спільно з професорами математики. Як зазначають розробники, цей набір охоплює різноманітні підгалузі, починаючи від теорії чисел і закінчуючи алгебраїчною геометрією.

Дослідження науковців свідчать про те, що сучасні моделі штучного інтелекту не демонструють математичних міркувань на рівні наукових досліджень. Проте, з розвитком технологій ШІ, ці порівняльні оцінки можуть стати інструментом для виявлення прогресу в їх здатностях до логічного мислення.

"Постійно аналізуючи найновіші моделі та взаємодіючи з дослідниками у сфері штучного інтелекту, ми маємо на меті розширити наше уявлення про потенціал і межі ШІ", - підкреслила команда вчених.

OBOZ.UA повідомляв, що картина, створена одним з найуспішніших художників на базі штучного інтелекту, була продана на аукціоні за вражаючі $1 мільйон.