Розробники Meta випустили найпотужніший штучний інтелект з відкритим кодом

Компанія Meta оголосила про випуск Lla­ma 3.1, останньої версії своєї великої мовної моделі (LLM). За словами розробників, новий ШІ за рядом тестів і параметрів перевершує аналогічні закриті розробки від Ope­nAI та Anthrop­ic. Найповніша версія моделі містить 405 мільярдів параметрів, це все ще менше ніж 1,8 трильйона параметрів у GPT‑4.

Оновлена модель з’явилася через три місяці після запуску Lla­ma 3. Нейромережу інтегрували в розумні окуляри та Meta AI — чат-бот, який працює у Face­book, Insta­gram і What­sApp у ряді країн. У порівнянні, опублікованому в блозі американського техногіганта, зазначено, що в ряді тестів Lla­ma 3.1 перевершує альтернативні ШІ — останні версії GPT-4o і Claude 3.5 Son­net від Ope­nAI і Anthrop­ic відповідно.

Meta стверджує, що Lla­ma 3.1 405B — перша загальнодоступна модель, яка може конкурувати з закритими продуктами в загальних знаннях, математичних навичках та перекладі на кілька мов. Для навчання компанія використовувала 16 000 графічних процесорів Nvidia H100.

Модель з 405 мільярдами параметрів використовує свої властивості для роздумів і прийняття рішень. Окрім великої моделі, компанія також випустила оновлення двох «менших» моделей Lla­ma, які містять 70 мільярдів і 8 мільярдів параметрів відповідно.

На відміну від Ope­nAI, Google, Microsoft і Anthrop­ic, які зберігають свої ШІ-моделі у приватній власності, Lla­ma надається з відкритим вихідним кодом, зазначають у Meta. Генеральний директор компанії Марк Цукерберг стверджує, що такий підхід забезпечить ширший доступ до переваг технології, запобігатиме концентрації влади серед кількох великих компаній і забезпечить більш безпечне впровадження ШІ.

Розробники можуть завантажити Lla­ma 3.1 з офіційного сайту моделі, вона також доступна у партнерів компанії, включаючи AWS, Nvidia, Data­bricks, Groq, Dell, Azure і Google Cloud. Користувачі можуть протестувати ШІ у чат-боті Meta AI, а в окремих країнах у Face­book, Insta­gram і What­sApp. Модель вміє генерувати як текст, так і зображення. Розробники уточнили, що у чат-боті наразі використовується версія з 70 мільярдами параметрів.