Ernie Baidus chatbot overgår ChatGPT i flere benchmark-tests

Baidu har meddelt, at den kunstige intelligensmodel Ernie 3.5 bag deres chatbot har overgået OpenAI's ChatGPT på flere vigtige områder.

Hvad er kendt

Ifølge teknologigiganten overgik Ernie 3.5 GPT-3.5 i en række benchmark-tests. Modellen klarede sig også bedre end GPT-4 i kinesiske sprogtests.

En af testene var baseret på standardiserede adgangs- og kvalifikationseksamener. Ernie 3.5 klarede sig bedre end begge OpenAI-modeller på kinesisk. Men i engelsksprogede opgaver var algoritmen ringere end GPT-4, men bedre end ChatGPT.

Testen fokuserer på det kinesiske sprog og indeholder over 13.000 multiple-choice-spørgsmål, der dækker over 50 forskellige emner. Ernie 3.5 var foran ChatGPT og GPT-4 i denne vurdering.

Den tredje test indeholder spørgsmål om forskellige emner inden for naturvidenskab og humaniora. Ernie 3.5 ligger bag både ChatGPT og GPT-4.

Hvad ved vi ellers?

Baidu har testet Ernie-botten offentligt i Kina siden marts 2023. Den er baseret på sprogmodellen Ernie 3.5. Ifølge udviklerne kan chatbotten konvertere lydoptagelser til skriftlige noter, oprette e-mails, generere tekster på opfordring og meget mere.

Kilde: CNBC.