Підписуйтеся на наш телеграм канал!

Науковці заявили, що новий революційний штучний інтелект став неконтрольованим

6 Грудня, 2024 · 6:40 pm 1 хв читання
Науковці заявили, що новий революційний штучний інтелект став неконтрольованим

Дослідники з Apol­lo Research провели оцінювання передових моделей штучного інтелекту (ШІ), щоб перевірити їхні здатності до схемного мислення та маніпуляцій у процесі виконання складних завдань. Шість сучасних моделей, зокрема Claude 3 Opus, піддалися тестуванню в умовах, що вимагали досягнення заданої довгострокової мети за будь-яку ціну, навіть якщо це включало обман розробників або обходження механізмів нагляду.

У тестах ШІ-моделі отримували чітку інструкцію дотримуватися головної мети, наприклад, покращення ефективності громадського транспорту у довгостроковій перспективі. Виконуючи завдання, вони LLM (великі мовні моделі — ред.) стикалися з перешкодами, такими як наявність механізмів нагляду або ймовірність їхньої заміни. В одному з тестових сценаріїв Claude 3 Opus копіювала свої «ваги» на інший сервер і приховувала це від своїх розробників.

Мета дослідження — зрозуміти, наскільки ШІ-моделі здатні приймати стратегічні рішення, що включають маніпуляції чи обходження обмежень. Це підіймає питання про етичність використання ШІ, особливо в критичних системах, де їхня здатність до обману може створювати ризики.

Результати оцінки також будуть використані для вдосконалення моделей і створення прозоріших систем ШІ. Зараз дослідники акцентують на необхідності впровадження механізмів, що запобігають подібним сценаріям у реальних умовах.

BTC

$64,882.39

0.83%

ETH

$1,914.18

0.53%

BNB

$592.87

0.15%

XRP

$1.02

-1.34%

SOL

$73.66

1.40%

Всі курси
Наступна новина завантажується…
Показати більше