CAOS: Conformal Aggregation of One-Shot Predictors

Share
CAOS: Conformal Aggregation of One-Shot Predictors

Teaching an AI a brand-new task from just one labeled example is fast—but how sure can you be about its answers?

CAOS (Conformal Aggregation of One‑Shot Predictors) is a new method from Maja Waldron that adds reliable confidence to one‑shot learning. Instead of trusting a single quick‑adapted model, CAOS aggregates multiple one‑shot predictors and uses a leave‑one‑out calibration step to squeeze the most out of scarce labels—no wasteful data splitting.

Even though it breaks some classical assumptions, CAOS comes with proofs that its confidence levels are reliable: its prediction sets include the correct answer at the promised rate. In tests on facial landmarking and RAFT text classification, CAOS produced smaller prediction sets than common baselines while keeping that reliability.

Confidence you can count on—from a single example.
  • What it is: a conformal framework for uncertainty in one‑shot learning
  • Why it matters: trustworthy AI with minimal labels
  • Paper: https://arxiv.org/abs/2601.05219v1

Paper: https://arxiv.org/abs/2601.05219v1

Register: https://www.AiFeta.com

#AI #MachineLearning #ConformalPrediction #OneShotLearning #Uncertainty #TrustworthyAI #NLP #ComputerVision

Read more

Kielimallit tekevät vaatimuskysymyksiä eri tyyleillä – ja tyyli riippuu käyttötarkoituksesta

Kielimallit tekevät vaatimuskysymyksiä eri tyyleillä – ja tyyli riippuu käyttötarkoituksesta

Uusi vertailu näyttää, että tekoälyn tapa muotoilla järjestelmävaatimuksia luonnollisen kielen kysymyksiksi vaihtelee mallin ja aiheen mukaan. Siksi tärkeintä ei ole valita ”parasta” mallia, vaan tilanteeseen sopiva. Kuvitellaan tuttu kokous: pöydän ääressä yritetään päättää, mitä uuden tietojärjestelmän pitää pystyä tekemään. Syntyy lista kysymyksiä, joihin järjestelmän on osattava vastata. Esimerkiksi: ”Mitkä lääkkeet

By Kari Jaaskelainen
Julkaistu ajattelu voidaan jo purkaa tekoälyksi

Julkaistu ajattelu voidaan jo purkaa tekoälyksi

Kun tutkija jättää työpöytänsä, hänen äänensä ei välttämättä vaikene. Pelkistä julkaisuista voidaan jo rakentaa tekoäly, joka ohjaa väitöskirjaa, arvioi artikkeleita ja väittelee paneelissa – uskottavasti. Useimmat meistä ajattelevat tutkimusartikkeleita kirjastoiksi: hyllyriveiksi ajatuksia, joihin muut voivat palata. Uusi arXivissa julkaistu esityspaperi ehdottaa toisenlaista kuvaa. Julkaisut ovatkin rakennuspiirustuksia, joista voidaan koota tekijänsä ajattelutapa

By Kari Jaaskelainen
Konferenssien suunta ei ole pakko syntyä suljettujen ovien takana

Konferenssien suunta ei ole pakko syntyä suljettujen ovien takana

Moni tietää tunteen seminaarin päätteeksi: ohjelma oli kiinnostava, mutta kuka päätti, mistä puhuttiin ja mistä ei? Usein vastaus on pieni ohjelmakomitea, joka tekee valinnat ennakkoon. Yleisö kuuntelee, harva vaikuttaa. Eräässä tekoälyn yhteiskunnallisia vaikutuksia käsittelevässä kansainvälisessä konferenssissa kokeiltiin toisenlaista tapaa. Osallistujat eivät vain tulleet paikalle – he auttoivat muokkaamaan itse tilaisuuden suuntaa.

By Kari Jaaskelainen