Robots That Plan Long, Multi‑Step Tasks Using General AI

Robots That Plan Long, Multi‑Step Tasks Using General AI

Teaching robots to handle real-world chores—no special training required

This research shows a new way for robots to complete long, multi-step tasks by combining off‑the‑shelf foundation models (the same kind powering today’s AI) with a constantly updated “scene graph”—a smart map of objects and their relationships.

Here’s the idea: foundation models handle what the robot sees and understands (vision and language), while a general reasoning model decides the sequence of actions. The scene graph ties it together, tracking where things are and how they change so the robot can plan reliably over many steps without forgetting context.

  • Multimodal perception from existing AI models
  • General-purpose reasoning for robust task sequencing
  • Dynamic scene graphs for spatial awareness and consistency

Tested on tabletop manipulation, the framework highlights a path to build capable robot systems directly on top of today’s off-the-shelf AI—no domain-specific training needed.

Paper by Sushil Samuel Dinesh and Shinkyu Park. Read more: http://arxiv.org/abs/2510.27558v1

Paper: http://arxiv.org/abs/2510.27558v1

Register: https://www.AiFeta.com

#AI #Robotics #RobotLearning #FoundationModels #SceneGraphs #Manipulation #Research

Read more

Koneiden käyttäytymistä ei tarvitse enää kirjoittaa kaavoiksi käsin

Koneiden käyttäytymistä ei tarvitse enää kirjoittaa kaavoiksi käsin

Kun hissi lähtee liikkeelle, ilmastointi säätää puhallusta tai robotti asettaa ruuvin paikalleen, taustalla on malli siitä, miten kone käyttäytyy. Niitä on perinteisesti rakennettu niin kuin hyviä reseptejä: asiantuntija kerää kokemusta, mittaa, kirjoittaa yhtälöitä ja virittää pitkään. Se vie aikaa – ja jokainen muutos laitteessa tai ympäristössä tarkoittaa uutta työtä. Viime vuosina

By Kari Jaaskelainen
Oppimalla ohjattu vedenalainen robotti löysi telakan – myös oikeassa vedessä

Oppimalla ohjattu vedenalainen robotti löysi telakan – myös oikeassa vedessä

Kun robotti-imuri hivuttautuu kotona lataustelakkaansa, kukaan ei pidä hetkeä ihmeenä. Veden alla sama temppu on kaikkea muuta kuin arkipäivää – näkyvyys on huono, virtaukset nykivät, eikä satelliittipaikannus auta. Silti juuri tähän suuntaan on otettu askel, joka voi venyttää vedenalaisten robottien toimintamatkaa ja -aikaa. Vuosia on ajateltu, että vedenalaisen telakoitumisen kaltaiset tehtävät

By Kari Jaaskelainen
Oppivat liikennevalot voivat lyhentää jonotusaikaa kymmenesosan

Oppivat liikennevalot voivat lyhentää jonotusaikaa kymmenesosan

Kaikki tietävät hetken, kun seisot punaisissa valoissa keskellä yötä, eikä mihinkään suuntaan näy autoja. Tai aamun, jolloin tavallinen risteys puuroutuu yllättäen, koska osa kuljettajista päättääkin kääntyä eri suuntaan kuin yleensä. Liikennevalot ovat sääntöjen koneita, mutta liikenne elää kuin säätila. Pitkään ratkaisuksi on ehdotettu ”älykkäitä” valoja, jotka oppivat liikenteestä ja säätävät

By Kari Jaaskelainen