Ernie Baidus chatbot overgår ChatGPT i flere benchmark-tests
Baidu har meddelt, at den kunstige intelligensmodel Ernie 3.5 bag deres chatbot har overgået OpenAI's ChatGPT på flere vigtige områder.
Hvad er kendt
Ifølge teknologigiganten overgik Ernie 3.5 GPT-3.5 i en række benchmark-tests. Modellen klarede sig også bedre end GPT-4 i kinesiske sprogtests.
En af testene var baseret på standardiserede adgangs- og kvalifikationseksamener. Ernie 3.5 klarede sig bedre end begge OpenAI-modeller på kinesisk. Men i engelsksprogede opgaver var algoritmen ringere end GPT-4, men bedre end ChatGPT.
Testen fokuserer på det kinesiske sprog og indeholder over 13.000 multiple-choice-spørgsmål, der dækker over 50 forskellige emner. Ernie 3.5 var foran ChatGPT og GPT-4 i denne vurdering.
Den tredje test indeholder spørgsmål om forskellige emner inden for naturvidenskab og humaniora. Ernie 3.5 ligger bag både ChatGPT og GPT-4.
Hvad ved vi ellers?
Baidu har testet Ernie-botten offentligt i Kina siden marts 2023. Den er baseret på sprogmodellen Ernie 3.5. Ifølge udviklerne kan chatbotten konvertere lydoptagelser til skriftlige noter, oprette e-mails, generere tekster på opfordring og meget mere.
Kilde: CNBC.
