Media: Meta opracowuje potężniejszy model sztucznej inteligencji
- Media dowiedziały się, że Meta pracuje nad potężniejszym LLM.
- Oczekuje się, że przewyższy on Llama 2. Premiera, według źródeł, odbędzie się w 2024 roku.
Firma Meta opracowuje nowy duży model językowy (LLM), który będzie konkurował z ChatGPT firmy OpenAI. Informuje o tym WSJ, powołując się na swoje źródła.
Oczekuje się, że będzie on “kilka razy” potężniejszy niż Llama 2. Przypomnijmy, że ten deweloper LLM został zaprezentowany w lipcu 2023 roku.
Według publikacji, szkolenie modelu rozpocznie się w pierwszych miesiącach 2024 roku. Potem przygotowania zajmą trochę więcej czasu, ale produkt prawdopodobnie trafi na rynek przed 2025 r., zauważył WSJ.
Źródła firmy podały, że Meta już aktywnie promuje projekt. W szczególności planuje zamówić więcej chipów Nvidia H100, aby stworzyć dodatkowe centra danych.
Przypomnijmy, że model Llama 2 jest trenowany z uwzględnieniem 70 miliardów parametrów. Nie ma takich danych na temat flagowego ChatGPT 4. Według różnych szacunków ekspertów, w tym przypadku mówimy o 1,5 biliona parametrów.
Wcześniej informowaliśmy, że Meta planuje wydać komercyjną wersję swojego LLM. Jednak według źródeł publikacji, nowe rozwiązanie będzie miało charakter open source.
Warto zauważyć, że w sierpniu 2023 r. ruch użytkowników w aplikacji ChatGPT spadł o 3%. I nie jest to pierwszy spadek w ciągu ostatnich miesięcy.