AgiBot gibt Datensatz für „Physical Reasoning“ frei: Roboter sollen vor dem Handeln entscheiden

AgiBot hat am 22. Oktober 2026 den vierten Teil seines Datensatzes AGIBOT WORLD 2026 freigegeben. Der Hersteller aus Shanghai nennt ihn „Physical Reasoning“. Erstmals gehe es nicht um die Schwierigkeit der Handgriffe, sondern um die Komplexität der Entscheidung: Ein Roboter soll dieselbe Aufgabe je nach Ausgangslage anders lösen. Die Daten liegen bei Hugging Face. Stunden oder Episodenzahlen nennt AgiBot in der Mitteilung nicht; nach unserer Zählung sind es rund 7.500 Episoden zu 18 Aufgaben. 

Was „Physical Reasoning“ hier bedeutet

AgiBot erklärt den Begriff an Beispielen. Soll ein Roboter die Minibar eines Hotelzimmers auf drei volle Flaschen auffüllen, muss er leere von vollen Flaschen unterscheiden, zählen, was schon da ist, und daraus ableiten, wie viele Flaschen er entnimmt und nachlegt. Liegt ein Schlüssel hinter einer Kiste, kann er ihn direkt greifen, wenn Platz ist; sonst muss er zuerst die Kiste wegschieben. Das Ziel bleibt gleich, der Handlungsweg ändert sich mit der Szene. Der Datensatz enthält deshalb für dieselbe Aufgabe bewusst mehrere Ausgangszustände und Ausführungszweige. 

AgiBot ordnet die Aufgaben neun Fähigkeiten zu: Auswahl nach Eigenschaften, Auswahl nach Kontext, Einschätzung, ob ein Griff machbar ist, Vorbedingungen einer Aktion, zielgerichtete Suche, Schlussfolgern über Zustand und Menge, Planung über lange Abläufe, Gedächtnis für den Aufgabenstand und die Reihenfolge von Teilaufgaben. Drei Schwierigkeitsstufen trennen einzelne Urteile von Aufgaben mit Mengenvorgaben und von Abläufen mit mehreren Teilzielen. Zu jeder Aufzeichnung gehören laut AgiBot eine Anweisung mit dem Gesamtziel, Teilaufgaben und Aktionsschritte, eine detaillierte Aktionsbeschreibung mit Zielobjekt, Greifbereich, Rolle beider Arme und Greiferzustand sowie räumliche Markierungen als Rahmen, Punkt oder Bewegungslinie. Erfolgreiche und fehlerhafte Durchläufe sind gleich gewichtet; auch das Ergebnis ist annotiert, etwa ob das richtige Objekt am richtigen Ort gelandet ist. Nach Angaben des Herstellers wurde der Datensatz bereits für ein kommendes Agenten-Framework und das nächste Basismodell von AgiBot genutzt. 

Umfang: Was bei Hugging Face liegt

Wir haben den Ordner „PhysicalReasoning“ des Datensatzes am 24. Oktober 2026 ausgezählt. Die Fassung „opensourcev4-20261001“ enthält 18 Aufgaben in 77 Teildatensätzen mit 7.470 Episodendateien. Die Aufgaben stammen aus Hotel, Gastronomie, Handel und Haushalt: Minibar und Toilettenartikel auffüllen, Zimmer reinigen (Sofa, Tisch, Bett), Tische abräumen und neu eindecken, Deckel zur passenden Essensbox finden, ein Regal am Eingang auffüllen, Waren nach Kundenwunsch oder Ernährungsvorgabe auswählen, Rührei mit Tomaten zubereiten, eine Werkzeugkiste aufräumen, Dinge je nach Wetter einpacken und Schubladen durchsuchen. Aufgezeichnet hat AgiBot mit seinem zweiarmigen Radroboter G2 (Gerätetyp „g2a“ in den Metadaten) über sieben Kamerakanäle mit 30 Bildern pro Sekunde: eine Kopfkamera, zwei Handkameras, drei Fischaugenkameras und eine Tiefenkamera. Ein Teildatensatz zum verdeckten Schlüssel umfasst 170 Episoden mit 75.828 Bildern, also gut 42 Minuten Material. Eine Gesamtstundenzahl lässt sich daraus nicht ableiten. 

Der Frage-Antwort-Teil liegt in einem Ordner „sharegpt“: Zu einzelnen Kamerabildern gehört jeweils eine Anweisung wie „Der rechte Arm schiebt die Taschentuchbox auf dem Tisch weg“ und als Antwort das Zielobjekt mit seinem Bildrahmen. Der gesamte Datensatz AGIBOT WORLD 2026 belegt bei Hugging Face rund 17,5 Terabyte, ist ohne Registrierung abrufbar und folgt dem Format LeRobot 2.1 der gleichnamigen Hugging-Face-Bibliothek. 

Die vier Teile von AGIBOT WORLD 2026

AgiBot hatte im April 2026 fünf Teile angekündigt; der fünfte steht noch aus. Vorläufer ist der Datensatz AgiBot World von 2025, der laut dem zugehörigen Fachaufsatz mehr als eine Million Trajektorien aus 217 Aufgaben enthält. Dass AGIBOT WORLD 2026 der erste offene Datensatz sei, der das gesamte Forschungsfeld der verkörperten KI abdecke, ist eine Aussage des Herstellers. 

Lizenz: offen für Forschung, nicht für Produkte

AgiBot spricht von „Open Source“. Die Lizenz ist aber enger: Die Datensatzbeschreibung bei Hugging Face legt fest, dass alle Daten und der Code unter CC BY-NC-SA 4.0 stehen. Nach dem Lizenztext von Creative Commons darf das Material nicht für kommerzielle Zwecke genutzt werden, Bearbeitungen müssen unter derselben Lizenz weitergegeben werden, und der Urheber ist zu nennen. Für Hochschulen und Forschungsinstitute in Europa ist der Datensatz damit nutzbar, sofern sie die 17,5 Terabyte herunterladen und verarbeiten können. Unternehmen, die daraus Modelle für eigene Produkte trainieren wollen, deckt die Lizenz nicht; ob AgiBot gesonderte Vereinbarungen anbietet, geht aus der Mitteilung nicht hervor. Europäische Partner nennt AgiBot nicht. Der Hersteller hat nach eigenen Angaben im September 2026 seinen 20.000sten Roboter gefertigt.