The Labs logoThe Labs
← Všechny výzkumy
Učení robotů · Lis 2026 · V simulaci

Učení robotů: co čísla ukazují a co ne

Studujeme manipulaci založenou na plánovači s malým podílem učení v simulaci, na úlohách z benchmarkové rodiny KinDER (arXiv:2604.25788). Tato stránka uvádí náš vlastní interní evaluační panel. Není to oficiální výsledek benchmarku.

Conceptual illustration generated with AI. Not experimental data or a depiction of the actual equipment.

Metoda

Každá varianta běží 250 epizod: seed prostředí 0 až 249, jedna epizoda na seed. Plánování používá vzorkovací plánovač (RRT), jehož seed je odvozen ze seedu prostředí a čísla kroku. Při nezměněném kódu a stejném seedu je simulace deterministická na seedech, které jsme znovu zkontrolovali. Epizody blízko 95sekundovému stropu závisí na zátěži stroje a mohou se převrátit, a malá změna kódu může převrátit jednotlivé epizody. Přidali jsme strop 95 sekund reálného času na epizodu. Epizody nad stropem se počítají jako selhání, takže při stejném protokolu bez stropu by výsledky byly stejné nebo vyšší. Toto nic neříká o jiných protokolech nebo jiných seedech.

Výsledky

V rodině Cluttered úspěšnost klesá s rostoucím počtem překážek: 249 z 250 epizod s 1 překážkou, 233 z 250 s 10 a 152 z 250 s 25.

ÚSPĚŠNOST ÚLOH NA INTERNÍM PANELU KINDER (KAŽDÁ250 EPIZOD)Cluttered, 1 překážka99.6%249/250 epizodCluttered, 10 překážek93.2%233/250 epizodCluttered, 25 překážek60.8%152/250 epizod
Rodina Cluttered, interní panel, 250 epizod na variantu, finální verze (v18). Zdroj: surové výsledky po epizodách z našeho evaluačního běhu, 9. listopadu 2026.

Nejtěžší případ, 25 překážek, se zlepšil ze 138 na 152 úspěchů z 250 poté, co jsme politice dovolili zopakovat neúspěšné položení až 5krát místo 2krát. Porovnání je párované na stejných seedech.

NEJTĚŽŠÍ ÚLOHA (25 PŘEKÁŽEK), PŘED A POOPAKOVÁNÍ POLOŽENÍPřed opakováním položení55.2%138/250 epizodPo (v18)60.8%152/250 epizod
Cluttered, 25 překážek: stejných 250 seedů před změnou a po ní. Zisk 14 epizod. Jedna konfigurace, jeden běh.

Odkud pocházejí zbývající selhání

Z 98 neúspěšných epizod při 25 překážkách bylo 47 neúspěšných úchopů, 26 narazilo na časový strop, 15 nemělo platné místo pro položení a 10 byla nepřesná položení.

PROČ SELHALO 98 NEÚSPĚŠNÝCH EPIZOD (NEJTĚŽŠÍÚLOHA, V18)Neúspěšný úchop47Časový strop (95 s)26Žádné platné místo pro položení15Nepřesné položení10
Třídy selhání při 25 překážkách (v18), jako podíl ze všech 250 epizod.

Limity

Kód, surové výsledky a úplný zápis nejsou veřejně dostupné.