Meta, материнська компанія Facebook і Instagram, працює над новою системою штучного інтелекту, яка має бути такою ж потужною, як і GPT-4 від OpenAI.
Про це повідомив The Wall Street Journal з посиланням на власні джерела.
Meta прагне зробити свою нову LLM (Large Language Model) у кілька разів потужнішою за Llama 2, яка вийшла пару місяців тому.
Майбутня система допоможе іншим компаніям створювати сервіси, які робитимуть складний текст, будуть проводити аналіз та генеруватимуть більш складні висновки.
Над системою працюватиме група, сформована на початку цього року Марком Цукербергом.
Meta планує розпочати навчання нової LLM на початку 2024 року.
Плани щодо нової моделі є частиною зусиль Цукерберга утвердити Meta як головну силу у світі ШІ (в контексті того, що вона зараз досить суттєво відстає від конкурентів).
Зараз компанія будує центри обробки даних, необхідні для роботи, і купує H100, надпотужні чіпи Nvidia, які використовуються для навчання ШІ.
Meta планує навчити нову модель на власній інфраструктурі.
Цукерберг наполягає на тому, щоб нова модель, як і попередні розробки Meta, була з відкритим кодом і, отже, безкоштовною для компаній задля створення інструментів на основі штучного інтелекту.
Meta сподівається, що нова модель буде приблизно такою ж потужною, як і GPT-4, яку OpenAI запустив у березні. GPT-4, нагадаємо, лежить в основі ChatGPT.
Бажання Meta створити модель з відкритими кодом має переваги. Та й крім того, Цукерберг відкрито агітував за них черех низьку вартість і адаптивність.
Але й у них є свої недоліки. До них належать підвищені ризики використання інформації, яка потенційно захищена авторським правом, і ширший доступ до інструменту, який може бути використаний для генерування та поширення дезінформації чи інших шкідливих дій.
Великі мовні моделі зазвичай стають потужнішими, коли навчаються на більшій кількості даних. Найпотужніша версія моделі Llama 2 була навчена на 70 мільярдах параметрів.
OpenAI не розголошує розмір GPT-4, але, за оцінками, він приблизно в 20 разів перевищує розмір Llama 2 і має 1,5 трильйона параметрів.
Читайте також:
Протягом наступних п’яти років у кожного з’явиться свій ШІ-помічник — співзасновник Google DeepMind
«Дешево та ефективно»: розробник створив ШІ-«конвеєр фейків» за $400
Дешеві та ефективні: дослідники занепокоєні темпами росту ШІ спам-ботів
Відеосервіс Zoom анонсує технологію цифрових двійників, які самостійно відвідуватимуть робочі зустрічі. Про це пише TechCrunch.…
IT-гігант Meta (материнська компанія Facebook) офіційно оголосив про придбання Moltbook — вірусної соціальної мережі, яка…
Експериментальний агент штучного інтелекту ROME, якого створили дослідники, пов'язані з китайською компанією Alibaba, продемонстрував неочікувану…
Центральне бюро боротьби з кіберзлочинністю Польщі (CBZC) провело масштабну операцію, результатом якої стало викриття групи…
Microsoft оголосила про початок інтеграції технологій Anthropic у свої сервіси, представивши новий інструмент Copilot Cowork,…
Компанія Anthropic оголосила про доступність у Claude Code бета-версії нового інструменту Code Review. Він розробленій…