Lakineuvova tekoäly toimii paremmin, kun se pysähtyy tarkistamaan jokaisen askeleen
Uusi tutkimus viittaa siihen, että pelkän oikean vastauksen tavoittelu ei riitä: virheitä vähentää, kun koneelta vaaditaan myös sääntöjenmukaista ja todennettua päättelyä.
Kuvitellaan tilanne: kysyt verkosta, mitä lakia pitäisi soveltaa, ja saat vakuuttavan vastauksen pykäläviitteineen. Teksti kuulostaa oikealta, mutta vasta myöhemmin selviää, että se viittasi väärään lakiin. Ongelma ei ole harvinainen – tekoäly on oppinut tuottamaan sujuvaa tekstiä, mutta ei aina pysähdy tarkistamaan, ovatko välivaiheet ja lähteet kunnossa.
Moni on tähän asti ajatellut, että tärkeintä on lopputulos: saako kone oikean vastauksen vai ei. Tuore tutkimus ehdottaa toista lähtökohtaa. Sen mukaan oikeudellisessa päättelyssä olennaista ei ole vain, mihin tullaan, vaan myös miten sinne päästään. Kun jokainen päättelyn askel tarkistetaan erikseen – onko tieto totta, liittyykö se käsillä olevaan tapaukseen ja noudattaako se menettelysääntöjä – virheiden määrä vähenee.
Todisteena tästä toimii arXivissa julkaistu työ, jossa esiteltiin ”LawThinker”, tekoälyjärjestelmä lakitutkimukseen. Sen perusajatus on kolmiaskel: etsi, tarkista, muista. Joka kerta kun järjestelmä löytää uutta tietoa, se pakottaa itsensä pysähtymään ja tarkistamaan löydön ennen kuin etenee. Samalla se pitää kirjaa aiemmin varmistetusta tiedosta, jotta samoja asioita ei tarvitse tarkistaa moneen kertaan pitkin tehtävää.
Tarkistus kysyy käytännössä kolmea asiaa. Ensiksi: pitääkö väite faktuaalisesti paikkansa lähteiden valossa. Toiseksi: liittyykö tieto todella käsiteltävän tapauksen tosiseikkoihin, vai onko se vain näennäisesti samankaltainen. Kolmanneksi: onko eteneminen oikeudellisesti siistiä – esimerkiksi ettei tule viitanneeksi sääntöihin, joita ei voi kyseisessä vaiheessa soveltaa.
Miltä tämä näyttää arjessa? Jos kone lähtee etsimään vastausta valitusaikaa koskevaan kysymykseen, se saattaa ensin törmätä korkeimman oikeuden menettelyä koskevaan sääntöön, vaikka tapaus koskee hallintovalitusta. Vanha tapa olisi jatkaa tämän varaan rakentamista, jos teksti näyttää uskottavalta. Uusi tapa pysäyttää: ei liity käsillä olevaan menettelyyn, hylätään ja haetaan uusi. Kun oikea säännös löytyy, se kirjataan muistiin, ja myöhemmät hakuvaiheet voivat tukeutua siihen ilman uutta haarailua vääriin suuntiin. Lopulta perustelu syntyy palasista, jotka on jokainen erikseen tarkistettu.
Tutkijat testasivat ideaa ympäristössä, joka yrittää jäljitellä todellista lakimaailmaa: säännöt ja oikeuskäytäntö muuttuvat, ja järjestelmän pitää pysyä perässä. Tällä dynaamisella testipatteristolla järjestelmä paransi tuloksiaan 24 prosenttia verrattuna suoraan, askelia varmistamatta etenevään päättelyyn. Verrattuna ennalta määriteltyihin, kaavamaisiin työtapoihin parannus oli 11 prosenttia. Erityisesti koheni se, miten siististi ja sääntöjen mukaisesti päättely eteni – toisin sanoen väärät tai asiaan kuulumattomat viittaukset eivät päässeet livahtamaan mukaan. Lisäksi järjestelmä ylsi hyviin tuloksiin kolmella vakiintuneella, muuttumattomalla testikokonaisuudella, mikä viittaa siihen, ettei hyöty rajoitu vain yhteen koeympäristöön.
On tärkeää huomata, mitä nämä tulokset ovat – ja mitä ne eivät ole. Ne kertovat suoriutumisesta tutkimusryhmien rakentamissa tehtävissä. Ne eivät vielä kerro, miten järjestelmä pärjäisi oikeassa toimistossa tai oikeussalissa, missä aineisto voi olla sekavaa, ristiriitaista tai vajavaista, ja missä virheiden seuraukset ovat toisenlaiset kuin laboratoriossa. Myös ”muuttuva ympäristö” on testipenkki: se on suunniteltu mittaamaan päivittyvään tietoon sopeutumista, mutta ei ole sama asia kuin oikeuslähteiden päivittäinen elävä virta.
Silti periaate on terve: jos välivaiheita ei voi tarkistaa, virhe pääsee etenemään kuin rikkinäisessä puhelimessa. Lakimaailmassa tämä näkyy erityisen terävästi, koska käytössä on paljon sääntöjä siitä, missä järjestyksessä asioita tehdään ja mihin lähteisiin saa nojata. Tieto voi olla sinänsä oikein, mutta väärä aika, väärä paikka tai väärä menettely tekee siitä käyttökelvotonta. Järjestelmä, joka pysähtyy kysymään näitä asioita jokaisessa mutkassa, muistuttaa kokeneen juristin työskentelytapaa enemmän kuin sujuvasanaista mutta huolimattomasti etenevää harjoittelijaa.
Käytännön merkitys on selvä. Jos tekoäly osaa kertoa paitsi vastauksen myös sen, miten vastaus on askel askeleelta rakennettu ja tarkistettu, sen neuvoihin on helpompi suhtautua kriittisesti ja luottavaisesti yhtä aikaa. Tällöin ihminen näkee, missä kohtaa päättely saattaa kaivata lisänäyttöä tai toisenlaista lähdettä. Julkaistu koodi antaa myös muille mahdollisuuden kokeilla, toimiiko lähestymistapa heidän aineistoillaan.
Rajoituksiakin riittää. Esimerkiksi se, kuinka hyvin tarkistus pystyy arvioimaan tiedon paikkansapitävyyttä ja relevanssia, riippuu viime kädessä siitä, mitä lähteitä on saatavilla ja miten niitä on kuvailtu. Lisäksi menettelysääntöjen noudattamista on helpompi mitata tutkimustehtävissä kuin todellisissa tilanteissa, joissa rajatapaukset ja tulkintaerot ovat arkipäivää. Ja vaikka askel askeleelta tarkistaminen tekee järjestelmästä varovaisemman, se voi myös hidastaa sitä.
Oikeudellinen tutkimustyö on yksi niistä aloista, joissa prosessi on lähes yhtä tärkeä kuin vastaus. Siksi on kiinnostavaa kysyä: jos askel askeleelta tarkistaminen auttaa lakineuvojaa, pitäisikö sama periaate ottaa vakavaksi vaatimukseksi myös muilla aloilla, joissa tekoäly tekee päätöksiä – lääketieteestä talousanalyysiin?
Paper: https://arxiv.org/abs/2602.12056v1
Register: https://www.AiFeta.com
tekoäly oikeus tutkimus lainsäädäntö arxiv tieteenviestintä
