Microsoft wydał kompaktowy model językowy Phi-2, który przewyższa Llama 2 i Mistral 7B

Autor: Bohdan Kaminskyi | 13.12.2023, 19:45
Microsoft wydał kompaktowy model językowy Phi-2, który przewyższa Llama 2 i Mistral 7B
Microsoft

Microsoft wydał Phi-2, kompaktowy model językowy, który przewyższa odpowiedniki Meta i innych gigantów technologicznych. Zawiera on 2,7 miliarda parametrów i może działać nawet na laptopie.

Co wiadomo

Według twórców, wydajność Phi-2 jest porównywalna ze znacznie większymi modelami, takimi jak Llama 2 lub Mistral-7B firmy Meta, które zawierają po 7 miliardów parametrów. Phi-2 wyprzedza również niedawno ogłoszony przez Google Gemini Nano 2, który ma o pół miliarda parametrów mniej.

Microsoft wydał kompaktowy model językowy Phi-2, który przewyższa Llama 2 i Mistral 7B-2
Porównanie wydajności Phi-2 i innych modeli jazikoi

Nowy produkt Microsoftu wykazuje również mniejszą toksyczność i tendencyjność reakcji w porównaniu do Llama 2. W wersji demonstracyjnej Phi-2, podobnie jak Google Gemini Ultra, był w stanie poprawnie odpowiedzieć na pytanie studenta.

Microsoft wydał kompaktowy model językowy Phi-2, który przewyższa Llama 2 i Mistral 7B-3
Przykład modelu Phi-2 odpowiadającego na pytanie

Na razie Phi-2 jest licencjonowany wyłącznie do celów badawczych, a nie do użytku komercyjnego.

Źródło: Microsoft