Die Softwareschicht zwischen einem Humanoiden und der Arbeit, die Sie von ihm erwarten.
Sentio OS ist eine Anwendungs- und Laufzeitschicht, die auf der eigenen Software des Roboters aufsetzt. Sie ersetzt weder die Firmware des Herstellers noch Linux noch die Low-Level-Steuerung und -Sicherheit.
Sie stellen Verhalten aus Blöcken zusammen, verwenden es als Skills wieder, lösen es per Taste, per Geste oder durch etwas aus, das der Roboter sieht, und führen es direkt auf dem Roboter aus, offline. Heute verfügbar für Unitree G1 EDU.
Der Startbildschirm: Roboterstatus, Schnellbefehle und was gerade läuft.
Ein Humanoid kommt mit Motoren, Sensoren und einer einfachen App. Sentio OS macht daraus Aufgaben, ohne monatelange Integration.
Führen Sie Sentio OS als Container auf dem zweiten Rechner des G1 aus oder auf dem Sentio Backpack, den der Roboter trägt. Ein Ethernet-Kabel. Im Roboter wird nichts überschrieben.
Kombinieren Sie Schritte und Bedingungen im visuellen Editor: sprechen, zuhören, sehen, gestikulieren, gehen, greifen. Speichern Sie das Ergebnis als Skill mit eigenem Auslöser.
Starten Sie ihn über die Weboberfläche, eine Controller-Taste, eine Geste oder einen Auslöser. Verfolgen Sie den Ablauf Schritt für Schritt. Stoppen Sie alles mit einer Taste.
Heute verfügbar auf dem Unitree G1 EDU. Wo Zubehör nötig ist, wird es genannt.
Verhalten, im Browser aus Blöcken zusammengestellt, vor dem Start geprüft, der laufende Schritt hervorgehoben.
Ansehen: Flow 1/6 →Verfügbar
Ein KI-Assistent direkt im Editor. Schreiben Sie, was der Roboter tun soll, und verfeinern Sie es dann: „nach der Begrüßung winken“. Jede Änderung wird hervorgehoben, ein Klick übernimmt oder verwirft sie. Er erfindet nie etwas, das der Roboter nicht kann.
Verfügbar
Ein als Skill gespeicherter Flow erscheint unter den Aktionen und lässt sich per Taste, per Handgelenkbewegung oder durch das starten, was der Roboter sieht.
Verfügbar
Objekt- und Personenerkennung, AprilTag-Marker, Gesichtserkennung mit Begrüßung beim Namen, Beschreibung der Szene.
Ansehen →Verfügbar · RealSense-Kamera
Zuhören, Sprachbefehle, ein Gesprächsagent und Sprachsynthese. Englisch, Tschechisch und Slowakisch. Spracherkennung (NVIDIA Parakeet) und Sprachausgabe (Piper) laufen lokal ohne Internet, oder Sie wählen die Cloud. Mit lokalen Modellen verlassen keine Daten den Roboter.
Ansehen →Verfügbar · Mikrofon
Der Roboter gestikuliert beim Sprechen: Die Gesten werden nach dem Inhalt jedes Satzes geplant, in Pausen gehalten, beide Arme gemeinsam. Dezenter, natürlicher oder ausdrucksstarker Stil, am 3D-Modell ausprobiert. Wenn er nicht spricht, atmet er, und seine Arme pendeln locker.
Verfügbar
Der Roboter nimmt am runden Tisch Platz. Er hört den Sprechern zu, antwortet, gestikuliert und leuchtet je nachdem, ob er spricht oder zuhört. Füllsätze kommen sofort, ohne peinliche Pausen.
Verfügbar · Mikrofon
Armpositionen durch Führen der Hand einlernen, in einem Raster über dem Tisch arbeiten, ein Objekt verfolgen, Pick-and-Place mit dem Sentio-Greifer.
Ansehen →Verfügbar · Sentio-Greifer
Zu einem Marker gehen, ihn suchen, per LiDAR durch freien Raum gehen, sich von einer Person an der Hand führen lassen. Die Karte wird mit jeder zurückgelegten Strecke genauer, Wände und Glas lassen sich einzeichnen.
Ansehen →Verfügbar · LiDAR optional
Keynote & Show: Sprechtexte von Moderator und Roboter mit Ton, von einer Stelle aus abgespielt. Die Gesten zu jedem Text entstehen automatisch.
Ansehen →Verfügbar
Telemetrie, Last und Temperaturen, ein Hardware-Watchdog, eine Blackbox des Geschehenen und eine Taste „Alles stoppen“.
Verfügbar
Der Arm springt nie, und STOP bremst kontrolliert. Wenn der Roboter losgeht oder überhitzt, gibt Sentio die Arme frei, für das Gleichgewicht und zum Schutz der Motoren. „Alles stoppen“ stoppt auch automatische Gesten. Beim Gehen hält der Roboter vor einem per LiDAR erkannten Hindernis an.
Verfügbar
Alles, was die Oberfläche tut, ist ein HTTP-Aufruf unter /api/v1 mit interaktiver Dokumentation auf dem Roboter. Das SDK ist ein schlanker Python-Client, den wir Ihnen auf Anfrage schicken.
Developer Preview
Ein Flow kann einen kollaborativen Roboterarm und eine smarte Shelly-Steckdose steuern: Der Humanoid schaltet eine Maschine ein oder übergibt ein Teil an einen Cobot.
Ansehen: Humanoid und Cobot → Vorgeführt
Fernsteuerung der Arme ohne VR-Headset und ohne leistungsstarke GPU, für Vorführungen und Datenerfassung.
In EntwicklungGetestet auf dem Unitree H2: Gehen und einfache Flows laufen, die Armpositionen müssen für die längeren Arme noch abgestimmt werden. Noch nicht unterstützt. Das Ziel ist eine gemeinsame Fähigkeitsschicht.
Getestet · noch nicht unterstütztDas Menü folgt dem, was Sie tun möchten: Home, Robot, Devices, Run und Teach. Die Hilfe ist integriert. Englisch und Tschechisch.
Wenn du eine Person siehst → grüße → winke → gehe zum Marker „Tisch“.
Die Blöcke heißen so, wie der Roboter arbeitet: Talk, Look, Arm, Walk. Leute aus der Fertigung können auf ein Fabrikvokabular umschalten, und neben den Blöcken steht das Programm Zeile für Zeile.
Ein Flow wird vor dem Start geprüft und zeigt, welcher Schritt gerade läuft. Speichern Sie ihn als Skill, und er bekommt einen eigenen Auslöser. Eigene Skills bauen Sie in Flow; spezialisierte kann ein Integrator liefern.
Wenn du eine Person siehst: sage „Ich sehe dich“ und winke. Sonst: frage „Ist jemand da?“
Sentio OS ist ein einziges Docker-Image für 64-Bit-ARM. Es läuft neben der Originalsoftware des Roboters und überschreibt sie nie. Schalten Sie es ab, und der Roboter funktioniert wie zuvor.
Installieren Sie den Container auf dem zweiten Rechner des Roboters (Jetson Orin NX). Nur Software, keine zusätzliche Hardware.
Ein fertiges Kit, das der Roboter trägt: Jetson Orin Nano Super, Stromversorgung aus dem Akku des Roboters und Sentio-Greifer, installiert und getestet. Ein Ethernet-Kabel am Nacken des Roboters.
64-Bit-ARM-Linux mit Docker, 8 GB RAM oder mehr, NVMe-Speicher, kabelgebundenes Ethernet zum Roboter. Derzeit keine GPU nötig.
Die Lizenz gehört zu einem Roboter und gilt ein Jahr, Updates inklusive. Sie ist eine signierte Datei: Der Roboter muss sich nie irgendwo verbinden, sie funktioniert also auch auf einer Messe und in einem abgeschotteten Netzwerk. Eine Dauerlizenz ist auf Anfrage erhältlich.
Für Unternehmen, die einen Humanoiden gekauft haben oder kurz davor stehen und ihn schnell im Einsatz haben wollen.
Von der verschlossenen Kiste zum sicher laufenden Roboter.
Technische Schulung für Ihre Entwickler und Ingenieure.
Gemeinsam testen wir einen konkreten neuen Einsatz eines Humanoiden.
Sie brauchen kein technisches Lastenheft. Sagen Sie uns, was Sie ausprobieren möchten, oder installieren Sie Sentio OS und finden Sie es selbst heraus.
