ChatGPT‑4 може знайти вразливості смартконтрактів у блокчейні Ethereum

GPT‑4, оновлена модель найвідомішого чат-бота Chat­G­PT, володіє можливостями, які не доступні у попередніх версіях продукту. Колишній директор Coin­base Конор Гроган розповів, що він вставив реальний смартконтракт Ethereum в GPT‑4 і чат-бот миттєво вказав на кілька “вразливостей безпеки” та описав сценарії використання коду:

I dumped a live Ethereum con­tract into GPT‑4.

In an instant, it high­light­ed a num­ber of secu­ri­ty vul­ner­a­bil­i­ties and point­ed out sur­face areas where the con­tract could be exploit­ed. It then ver­i­fied a spe­cif­ic way I could exploit the con­tract pic.twitter.com/its5puakUW

— Conor (@jconorgrogan) March 14, 2023

До слова, попередні аудити смартконтрактів на Chat­G­PT демонстрували, що найперша версія чат-бота також була здатна виявляти помилки у коді. 

Раніше ми розповідали про досвід взаємодії з Chat­G­PT співзасновника Ethereum Віталіка Бутеріна. За словами розробника, Chat­G­PT допустив ряд помилок, коли Бутерін попросив алгоритм надати конкретні фрагменти коду за запитом. Бутерін дійшов висновку, що штучний інтелект не зможе замінити людей-програмістів у найближчому майбутньому. “Хоча Chat­G­PT може бути ефективним способом для розробників знайти відповіді на питання, він може давати погані поради. Програмістам слід обережно використовувати інструмент”,  — зазначив тоді батько ефіріума.

Цікаво, що GPT‑4 може складати шкільні тести та іспити на юридичний факультет з 90% успішністю. Результати тестування чат-бота були оприлюднені 14 березня розробниками Ope­nAI. Показники продемонстрували, що ШІ може перетворювати зображення, аудіо- та відеофайли на текст, а також більш творчо обробляти “дуже деталізовані інструкції”.

“Він (GPT‑4) проходить імітацію адвокатського іспиту з результатом, який властивий близько 10% реальним найсильнішим учасникам тестування”, — додали в Ope­nAI. 

Результати GPT‑4 дають чат-боту непогані шанси бути зарахованим до 20 найкращих юридичних шкіл США. Чат-бот зовсім трохи не дотягує до прохідного балу, необхідного для вступу до Гарварду, Стенфорда, Принстона або Єлю.

GPT‑4 також набрав 298 з 400 балів на Єдиному адвокатському іспиті — тесті, який складають правники-випускники вишів. Успішна здача іспиту дозволяє майбутнім юристам мати власну практику в будь-якій юрисдикції США.

Щодо іспитів SAT Evi­dence-Based Read­ing & Writ­ing та SAT Math, які складають американські старшокласники для визначення їхньої готовності до вступу в коледжі, GPT‑4 посів 93‑й та 89‑й процентилі. Оновлена версія чат-бота також досягла успіхів у “точних” науках — зокрема біології, фізиці та хімії. Однак виявилося, що ШІ поки доволі посередньо справляється з математикою.

У Ope­nAI заявили, що GPT‑4 складав реальні іспити 2022–2023 років, а перед цим ШІ не проходив “жодну спеціальну підготовку”. 

“Ми не проводили спеціальної підготовки до цих іспитів. Незначна частина проблем у самих екзаменах була помічена ШІ під час навчання. Ми вважаємо, що результати є репрезентативними”, — заявили розробники.

Такі експерименти викликали неоднозначну реакцію у Twit­ter-спільноті.

Нік Алмонд, засновник Fac­to­ry­DAO, заявив, що GPT‑4 “налякає людей” і “зруйнує” світову освітню систему.

They’ve basi­cal­ly trained it to pass all the tests that we use in the edu­ca­tion sys­tem, and it does, ace them.

So… we either need a new way of mea­sur­ing intel­li­gence, or 90% of us are dumb­er than the machines. https://t.co/1UCRS7ANSh

— drnick ?️² (@DrNickA) March 14, 2023

Побоювання Алмонда мають сенс. Нагадаємо — 89% американських студентів зізналися, що використовують штучний інтелект для виконання домашніх завдань. Приблизно 50% студентів на регулярній основі доручають Chat­G­PT написання есе, 48% застосовують ШІ для проходження тестів. Ще 22% зізналися, що навіть не намагаються скласти план статті без допомоги цифрового помічника.