RAG for UK NICE guidelines: high-recall retrieval and near-perfect faithfulness

Kari Jaaskelainen

From pages to precise answers. 🏥🔎📚✅

This system queries UK NICE clinical guidelines with a hybrid retrieval stack over 10,195 chunks (from 300 guidelines). On 7,901 queries: MRR 0.814; Recall 81%@1 and 99.1%@10. In generation on 70 QA pairs, RAG-enhanced models achieved perfect context precision (1) and boosted faithfulness—e.g., O4-Mini to 99.5%—far above a compared baseline (43%).

Why it matters: Grounded answers reduce hallucinations and speed evidence access—key in time-pressed care.

Evidence in, errors out. Share with your clinical AI team.

Paper: http://arxiv.org/abs/2510.02967v1
Register: https://www.AiFeta.com

Paper: http://arxiv.org/abs/2510.02967v1

Register: https://www.AiFeta.com

#RAG #HealthcareAI #NICEGuidelines #EvidenceBased #LLM #Retrieval #MedicalInformatics #Faithfulness

Read more

Tekoäly ei enää vain ehdota – se myös koettaa

Tekoäly ei enää vain ehdota – se myös koettaa

Kuvittele tutkija, joka esittää tietokoneelle väitteen: “Tämä rakenne voisi kestää kuumuutta paremmin.” Ennen vastaus olisi ollut viittauksia artikkeleihin ja arveluja. Nyt kone voi myös yrittää: se luonnostelee kokeen, simuloi atomien liikettä ja palaa perusteltuun arvioon – heti samassa istunnossa. Tämä on hienovarainen mutta merkittävä muutos. Vielä hiljattain kielimallipohjaiset tekoälyt olivat taitavia

By Kari Jaaskelainen
Tekoäly alkaa opetella opettamaan itseään

Tekoäly alkaa opetella opettamaan itseään

Jos kone voi suunnitella ja kokeilla omat harjoitusohjelmansa, tekoälyn kehitys voi nopeutua – mutta samalla kasvaa tarve selittää, mitä se tekee ja miksi. Kuvittele, että opetat lapselle uuden pelin. Ensin kerrot säännöt, sitten kokeilette, teette virheitä, muutatte taktiikkaa ja palaatte aiempiin kokeiluihin oppiaksenne niistä. Näin ihminen yleensä oppii monimutkaisia asioita. Nyt

By Kari Jaaskelainen
Tekoälyn selitys voi olla pieni mutta ratkaiseva – ja juuri siksi luotettavampi

Tekoälyn selitys voi olla pieni mutta ratkaiseva – ja juuri siksi luotettavampi

Uusi menetelmä lupaa vaihtaa suttuiset korostukset teräviin todisteisiin, jotta lääkärille näkyy täsmälleen se, mihin päätös perustui. Kuvittele rutiininen hetki sairaalassa: tietokone katsoo keuhkokuvaa, antaa tulokseksi “poikkeava” ja levittää kuvan päälle oranssin läiskän. Läiskä kertoo, että jossain siinä suunnassa oli jotain tärkeää. Mutta mitä tarkalleen? Onko ratkaisevaa pieni varjo kylkiluussa vai

By Kari Jaaskelainen
Kaksi tekoälyä voi olla reilumpi kuin yksi

Kaksi tekoälyä voi olla reilumpi kuin yksi

Tutkijoiden simuloimassa päivystyksessä oikeudenmukaisuus syntyi neuvottelusta, ei yhdestä auktoriteetista. Se haastaa tavan, jolla tekoälyä on tähän asti arvioitu ja säädelty. Kuvittele ruuhkainen päivystysilta: paikkoja on liian vähän, potilaita liikaa. Yhden älykkään järjestelmän sijaan päätöksiä valmistelee kaksi tekoälyä. Ne käyvät muutaman kierroksen keskustelun siitä, kenelle hoito kuuluu ensin ja millä perusteilla.

By Kari Jaaskelainen