ChatGPT-4 може знайти вразливості смартконтрактів у блокчейні Ethereum

GPT-4, оновлена модель найвідомішого чат-бота ChatGPT, володіє можливостями, які не доступні у попередніх версіях продукту. Колишній директор Coinbase Конор Гроган розповів, що він вставив реальний смартконтракт Ethereum в GPT-4 і чат-бот миттєво вказав на кілька «вразливостей безпеки» та описав сценарії використання коду:

I dumped a live Ethereum contract into GPT-4.

In an instant, it highlighted a number of security vulnerabilities and pointed out surface areas where the contract could be exploited. It then verified a specific way I could exploit the contract pic.twitter.com/its5puakUW

— Conor (@jconorgrogan) March 14, 2023

До слова, попередні аудити смартконтрактів на ChatGPT демонстрували, що найперша версія чат-бота також була здатна виявляти помилки у коді.

Раніше ми розповідали про досвід взаємодії з ChatGPT співзасновника Ethereum Віталіка Бутеріна. За словами розробника, ChatGPT допустив ряд помилок, коли Бутерін попросив алгоритм надати конкретні фрагменти коду за запитом. Бутерін дійшов висновку, що штучний інтелект не зможе замінити людей-програмістів у найближчому майбутньому. «Хоча ChatGPT може бути ефективним способом для розробників знайти відповіді на питання, він може давати погані поради. Програмістам слід обережно використовувати інструмент», - зазначив тоді батько ефіріума.

Цікаво, що GPT-4 може складати шкільні тести та іспити на юридичний факультет з 90% успішністю. Результати тестування чат-бота були оприлюднені 14 березня розробниками OpenAI. Показники продемонстрували, що ШІ може перетворювати зображення, аудіо- та відеофайли на текст, а також більш творчо обробляти «дуже деталізовані інструкції».

«Він (GPT-4) проходить імітацію адвокатського іспиту з результатом, який властивий близько 10% реальним найсильнішим учасникам тестування», — додали в OpenAI.

Результати GPT-4 дають чат-боту непогані шанси бути зарахованим до 20 найкращих юридичних шкіл США. Чат-бот зовсім трохи не дотягує до прохідного балу, необхідного для вступу до Гарварду, Стенфорда, Принстона або Єлю.

GPT-4 також набрав 298 з 400 балів на Єдиному адвокатському іспиті - тесті, який складають правники-випускники вишів. Успішна здача іспиту дозволяє майбутнім юристам мати власну практику в будь-якій юрисдикції США.

Щодо іспитів SAT Evidence-Based Reading & Writing та SAT Math, які складають американські старшокласники для визначення їхньої готовності до вступу в коледжі, GPT-4 посів 93-й та 89-й процентилі. Оновлена версія чат-бота також досягла успіхів у «точних» науках — зокрема біології, фізиці та хімії. Однак виявилося, що ШІ поки доволі посередньо справляється з математикою.

У OpenAI заявили, що GPT-4 складав реальні іспити 2022−2023 років, а перед цим ШІ не проходив «жодну спеціальну підготовку».

«Ми не проводили спеціальної підготовки до цих іспитів. Незначна частина проблем у самих екзаменах була помічена ШІ під час навчання. Ми вважаємо, що результати є репрезентативними», — заявили розробники.

Такі експерименти викликали неоднозначну реакцію у Twitter-спільноті.

Нік Алмонд, засновник FactoryDAO, заявив, що GPT-4 «налякає людей» і «зруйнує» світову освітню систему.

They’ve basically trained it to pass all the tests that we use in the education system, and it does, ace them.

So… we either need a new way of measuring intelligence, or 90% of us are dumber than the machines. https://t.co/1UCRS7ANSh

— drnick ?️² (@DrNickA) March 14, 2023

Побоювання Алмонда мають сенс. Нагадаємо — 89% американських студентів зізналися, що використовують штучний інтелект для виконання домашніх завдань. Приблизно 50% студентів на регулярній основі доручають ChatGPT написання есе, 48% застосовують ШІ для проходження тестів. Ще 22% зізналися, що навіть не намагаються скласти план статті без допомоги цифрового помічника.