De store språkmodellene for kunstig intelligens virker forlokkende intelligente og kan gi fyldige svar på selv de mest komplekse spørsmål. Men de mislykkes med enkle oppgaver som de fleste barn kan håndtere.
En gruppe forskere ved University of Edinburgh i Skottland har funnet ut at de fleste kunstige intelligenser sliter med å lese viserne på klokker. De kan heller ikke gjenkjenne datoer i en kalender.
Forskerne ba KI-modellene om å lese av tiden på forskjellige urskiver med visere. Studien viste at KI-ene i beste fall gjorde det riktig en fjerdedel av gangene! Verst var det med klokker med romertall eller stiliserte visere.
Funnene våre viser at det er et betydelig gap i KI’s evne til å utføre det som er helt grunnleggende ferdigheter for mennesker. Disse manglene må utbedres hvis KI-systemer skal kunne integreres i tidssensitive applikasjoner som planlegging, automatisering og hjelpeteknologi.»
– Rohit Saxena, School of Informatics
En vanlig skrivebordskalender med flere dager vist på samme side gjorde det også vanskelig for KI-ene. Feilprosenten var lavere enn på urskivene, men KI-ene tok likevel feil i 20 prosent av tilfellene da de ble bedt om å identifisere høytider.
Så kanskje er det for tidlig å be KI-assistenten din om å bestille en ferietur i påskeferien. I hvert fall hvis det er viktig for deg at den finner sted på de dagene du har fri…
Resultatene av studien vil bli presentert på en workshop om storskala språkmodellering på en konferanse om kunstig intelligens i april i år.
Kilde: University of Edinburgh