Bland annat var Ernie bättre när det kommer till typiska antagnings- och kvalificeringstester till universitet. Man slog både ChatGPT och den senaste varianten av AI-chattboten, ChatGPT 4, i kinesiska.
I ett annat test slog Ernie både ChatGPT och ChatGPT 4 när det kommer till över 13 000 flervalsfrågor i ett drygt 50-tal ämnen.
Ernie var dock inte framgångsrik i alla tester. Den hamnade på efterkälken kring frågor i vissa ämnen som har utvecklats av en grupp amerikanska universitet, såsom vetenskap och humaniora.
Baidu sade också att en utmärkande egenskap hos senaste modellen av Ernie är möjligheten att komma åt “plugins”, vilka är appar som kan nås via Ernie Bot. Baidus sökfunktion har nu exempelvis integrerats med Ernie Bot genom en plugin.
