RAG for UK NICE guidelines: high-recall retrieval and near-perfect faithfulness

From pages to precise answers. 🏥🔎📚✅

This system queries UK NICE clinical guidelines with a hybrid retrieval stack over 10,195 chunks (from 300 guidelines). On 7,901 queries: MRR 0.814; Recall 81%@1 and 99.1%@10. In generation on 70 QA pairs, RAG-enhanced models achieved perfect context precision (1) and boosted faithfulness—e.g., O4-Mini to 99.5%—far above a compared baseline (43%).

Why it matters: Grounded answers reduce hallucinations and speed evidence access—key in time-pressed care.

Evidence in, errors out. Share with your clinical AI team.

Paper: http://arxiv.org/abs/2510.02967v1
Register: https://www.AiFeta.com

Paper: http://arxiv.org/abs/2510.02967v1

Register: https://www.AiFeta.com

#RAG #HealthcareAI #NICEGuidelines #EvidenceBased #LLM #Retrieval #MedicalInformatics #Faithfulness

Read more

Tekijöiden rehellinen itsearvio voi parantaa tiedekonferenssien palkintovalintoja

Tekijöiden rehellinen itsearvio voi parantaa tiedekonferenssien palkintovalintoja

Jokainen, joka on joskus osallistunut suuren tieteenalan palkintoraatiin, tuntee tunteen: satojen ehdokkaiden joukosta pitäisi löytää ne muutamat, jotka todella erottuvat. Tekoälyn ja koneoppimisen suurkonferensseissa tilanne on viety äärimmilleen. Niihin virtaa nykyään kymmeniä tuhansia käsikirjoituksia, ja parhaiden paperien palkintoja jaetaan, vaikka arviointi nojaa kiireisten vapaaehtoisten tekemiin pisteisiin ja hajanaisiin kommentteihin. Arkijärki

By Kari Jaaskelainen
Pelkkä pidempi muisti ei riitä tekoälylle, kun tieto on hajallaan

Pelkkä pidempi muisti ei riitä tekoälylle, kun tieto on hajallaan

Uusi, poikkeuksellisen laaja testi vihjaa, että nykyiset kielimallit eivät vielä hallitse kokonaisia arkistoja – ja että toisenlainen tapa järjestää niiden työ voisi toimia paremmin. Moni tunnistaa tunteen: etsit yhtä lukua kymmenistä raporteista tai yhtä nimeä vuosien sähköposteista. Vastaus ei ole yhdessä kohdassa, vaan pilkottuna sinne tänne. Ihmiselle tämä on työlästä – tekoälylle

By Kari Jaaskelainen
Tekoälylle voi antaa asiointioikeuden ilman pääavainta

Tekoälylle voi antaa asiointioikeuden ilman pääavainta

Oletko koskaan jättänyt naapurille valtuutuksen hakea paketin puolestasi? Arkinen paperilappu riittää tiskillä, kunhan nimi täsmää. Verkossa sama tilanne on pulmallisempi: miten antaa toiselle – tai tekoälylle – lupa toimia puolestasi paljastamatta koko elämääsi, salasanojasi tai luottokorttiasi? Digitaalisessa maailmassa on pitkään eletty kahden huonon vaihtoehdon välissä. Joko jaetaan pääsyyn tarvittava avain – salasana, token

By Kari Jaaskelainen