Meta ma dziś miłą niespodziankę: swój najnowszy model wielkojęzyczny (LLM), Llama 3. Firma wyjaśnia, że nowa Llama 3 8B zawiera 8 miliardów parametrów, podczas gdy Llama 3 70B ma 70 miliardów parametrów.
ZOBACZ GALERIĘ – 2 ZDJĘCIA
Advertisement
Meta obiecuje gigantyczny wzrost wydajności w porównaniu z poprzednimi modelami Llama 2 8B i Llama 2 70B, przy czym firma twierdzi, że Llama 3 8B i Llama 3 70B to jedne z najlepiej działających dostępnych obecnie modeli generatywnej sztucznej inteligencji, trenowane na dwóch specjalnie zbudowanych 24 000 klastrów GPU.
Firma wytrenowała swój nowy model Llama 3 na ponad 15 bilionach tokenów zebranych z „publicznie dostępnych źródeł”, a zbiór danych szkoleniowych Met'a jest 7 razy większy niż ten wykorzystany w przypadku Llama 2 i obejmuje 4 razy więcej kodu.
Nowe dania na wynos z Lamy 3 od Meta:
- Dzisiaj przedstawiamy Meta Llama 3, następną generację naszego najnowocześniejszego modelu dużego języka o otwartym kodzie źródłowym.
- Modele Llama 3 będą wkrótce dostępne na platformach AWS, Databricks, Google Cloud, Hugging Face, Kaggle, IBM WatsonX, Microsoft Azure, NVIDIA NIM i Snowflake oraz przy wsparciu platform sprzętowych oferowanych przez AMD, AWS, Dell, Intel, NVIDIA, i Qualcomm.
- Zależy nam na odpowiedzialnym rozwijaniu Lamy 3 i oferujemy różne zasoby, aby pomóc innym również w odpowiedzialnym korzystaniu z niej. Obejmuje to wprowadzenie nowych narzędzi zaufania i bezpieczeństwa w postaci Llama Guard 2, Code Shield i CyberSec Eval 2.
- W nadchodzących miesiącach spodziewamy się wprowadzenia nowych możliwości, dłuższych okien kontekstowych, dodatkowych rozmiarów modeli i zwiększonej wydajności, a także udostępnimy artykuł badawczy dotyczący Lamy 3.
- Meta AI, zbudowana w oparciu o technologię Llama 3, jest obecnie jednym z wiodących na świecie asystentów AI, który może zwiększyć Twoją inteligencję i odciążyć Cię, pomagając Ci w nauce, wykonywaniu zadań, tworzeniu treści i nawiązywaniu kontaktów, aby jak najlepiej wykorzystać każdą chwilę. Możesz wypróbować Meta AI tutaj.
Możesz przeczytać wszystkie ciekawostki o nowym modelu Llama 3 firmy Meta Tutaj.
Advertisement