What Really Drives AI Risk: Intelligence, Not Consciousness

What Really Drives AI Risk: Intelligence, Not Consciousness

Are conscious AIs more dangerous? Not necessarily. A new paper by Rufin VanRullen separates two often-blurred ideas—consciousness and intelligence—and shows why mixing them can misdirect AI safety debates.

Key takeaways

  • Consciousness ≠ intelligence. They are empirically and theoretically distinct.
  • It’s intelligence—the capability to achieve goals—that best predicts existential risk from AI.
  • Consciousness isn’t a direct risk factor, but it could matter indirectly: it might aid alignment (lowering risk) or be a prerequisite for certain high-level capabilities (raising risk).

Bottom line: focus research and policy on managing capabilities and objectives, while staying open to how consciousness could incidentally help or hinder safety.

Read the paper: https://arxiv.org/abs/2511.19115v1

Paper: https://arxiv.org/abs/2511.19115v1

Register: https://www.AiFeta.com

#AI #AISafety #ExistentialRisk #Consciousness #Intelligence #Alignment #Policy #arXiv

Read more

Koneiden käyttäytymistä ei tarvitse enää kirjoittaa kaavoiksi käsin

Koneiden käyttäytymistä ei tarvitse enää kirjoittaa kaavoiksi käsin

Kun hissi lähtee liikkeelle, ilmastointi säätää puhallusta tai robotti asettaa ruuvin paikalleen, taustalla on malli siitä, miten kone käyttäytyy. Niitä on perinteisesti rakennettu niin kuin hyviä reseptejä: asiantuntija kerää kokemusta, mittaa, kirjoittaa yhtälöitä ja virittää pitkään. Se vie aikaa – ja jokainen muutos laitteessa tai ympäristössä tarkoittaa uutta työtä. Viime vuosina

By Kari Jaaskelainen
Oppimalla ohjattu vedenalainen robotti löysi telakan – myös oikeassa vedessä

Oppimalla ohjattu vedenalainen robotti löysi telakan – myös oikeassa vedessä

Kun robotti-imuri hivuttautuu kotona lataustelakkaansa, kukaan ei pidä hetkeä ihmeenä. Veden alla sama temppu on kaikkea muuta kuin arkipäivää – näkyvyys on huono, virtaukset nykivät, eikä satelliittipaikannus auta. Silti juuri tähän suuntaan on otettu askel, joka voi venyttää vedenalaisten robottien toimintamatkaa ja -aikaa. Vuosia on ajateltu, että vedenalaisen telakoitumisen kaltaiset tehtävät

By Kari Jaaskelainen
Oppivat liikennevalot voivat lyhentää jonotusaikaa kymmenesosan

Oppivat liikennevalot voivat lyhentää jonotusaikaa kymmenesosan

Kaikki tietävät hetken, kun seisot punaisissa valoissa keskellä yötä, eikä mihinkään suuntaan näy autoja. Tai aamun, jolloin tavallinen risteys puuroutuu yllättäen, koska osa kuljettajista päättääkin kääntyä eri suuntaan kuin yleensä. Liikennevalot ovat sääntöjen koneita, mutta liikenne elää kuin säätila. Pitkään ratkaisuksi on ehdotettu ”älykkäitä” valoja, jotka oppivat liikenteestä ja säätävät

By Kari Jaaskelainen