Voiko tekoäly ennustaa uuden oikeustapauksen lopputuloksen analysoimalla tuomioistuinten ratkaisuja ja oikeusprejudikaatteja 90 prosentin tarkkuudella ?

Testi EI ole "kysy tekoälyltä osaako se X:n" — jokainen malli sanoisi vain kyllä. Sen sijaan pyydämme jokaista tekoälyä todella tekemään asian ja arvioimme tuloksen.

Uudelleenajetaan kuukausittain. Jokainen testi kirjataan tekoälyn raakatuotoksen kanssa, joten päätökset ovat tarkastettavissa. Kyvyt muuttuvat nopeasti — mikä epäonnistui viime kuussa voi onnistua tässä kuussa.

Jotkut aiheet yhdistävät "osaako tekoäly teknisesti X:n?" toiseen kysymykseen — yleensä juridisen luvan, sosiaalisen hyväksynnän, oikeudenmukaisuuden tai sen, voiko tekoäly saavuttaa lopputuloksen joka viime kädessä riippuu ihmisistä.

Tuomaristomme vastaa vain TEKNISEN KYVYN puoliskoon — "osaako tekoäly tuottaa työn?" — ja sivuuttaa lupa-, lisenssi-, eettisen tai ihmispäätöksen puoliskon. Päätös tästä aiheesta koskee siksi kapeasti sitä mitä tekoäly OSAA tehdä, ei sitä mitä sen sallitaan tehdä.

Jos mielestäsi aiheen otsikko pitäisi muotoilla uudelleen sekoituksen poistamiseksi, voit lähettää uudelleenkirjoituksen "Ehdota"-painikkeen kautta. Siivoamme sekoittuneita otsikoita ajoittain lukijoiden ehdotusten perusteella.