Chatbot Ernie Baidu przewyższa ChatGPT w kilku testach porównawczych
Baidu ogłosiło, że model sztucznej inteligencji Ernie 3.5 stojący za jej chatbotem przewyższył ChatGPT OpenAI w kilku kluczowych obszarach.
Co wiadomo
Według giganta technologicznego, Ernie 3.5 przewyższył GPT-3.5 w wielu testach porównawczych. Model ten osiągnął również lepsze wyniki niż GPT-4 w testach języka chińskiego.
Jeden z testów porównawczych opierał się na standardowych egzaminach wstępnych i kwalifikacyjnych. Ernie 3.5 osiągnął lepsze wyniki niż oba modele OpenAI w języku chińskim. Algorytm był jednak gorszy od GPT-4 w zadaniach w języku angielskim, ale wyprzedził ChatGPT.
Test koncentruje się na języku chińskim i zawiera ponad 13 000 pytań wielokrotnego wyboru obejmujących ponad 50 różnych tematów. W tej ocenie Ernie 3.5 wyprzedził ChatGPT i GPT-4.
Trzeci test zawiera pytania z różnych dziedzin nauk przyrodniczych i humanistycznych. Ernie 3.5 okazał się gorszy zarówno od ChatGPT, jak i GPT-4.
Co jeszcze wiadomo?
Baidu publicznie testuje bota Ernie w Chinach od marca 2023 roku. Jest on oparty na modelu językowym Ernie 3.5. Według twórców chatbot może konwertować nagrania audio na pisemne notatki, tworzyć e-maile, generować teksty na podpowiedzi i wiele więcej.
Źródło: CNBC.