← 返回概览
Sentio OS

Sentio OS

介于人形机器人与您期望它完成的工作之间的软件层。

Sentio OS 是运行在机器人自身软件之上的应用与运行时层。它不替换制造商的固件、Linux,也不替换底层控制与安全机制。

您用积木块组合行为,将其作为技能复用,通过按键、手势或机器人看到的东西来触发,并直接在机器人上离线运行。现已支持 Unitree G1 EDU。

Sentio OS · Home
Sentio OS 主屏幕:机器人状态、说话、手势和聆听

主屏幕:机器人状态、快捷指令,以及正在运行的内容。

工作原理

连接。搭建。运行。

人形机器人到货时带着电机、传感器和一个基础应用。Sentio OS 把它们变成任务,无需数月的集成。

01

连接您的机器人

把 Sentio OS 作为容器运行在 G1 的第二台计算机上,或运行在机器人背着的 Sentio Backpack 上。一根以太网线。机器人内部不会被改写任何内容。

02

搭建 Flow

在可视化编辑器中组合步骤和条件:说、听、看、做手势、行走、抓取。保存为带有专属触发器的技能。

03

在您的机器人上运行

从网页界面、遥控器按键、手势或触发器启动。逐步查看运行过程。一键停止一切。

能力

Sentio OS 汇集了哪些能力。

现已可在 Unitree G1 EDU 上使用。需要配件之处均已注明。

Sentio Flow 编辑器:说话、走到标记、打开插座、手臂姿势,以及“如果看到人”条件

可视化 Flow

在浏览器中用积木块组合行为,运行前检查,并高亮显示正在执行的步骤。

观看:Flow 1/6 →可用
Flow 编辑器中的 AI 助手:收到“最后挥手”的请求后,它在末尾添加一个手势并标记为新增,附带“撤销”和“保留”按钮

对话式搭建

编辑器内置 AI 助手。写下机器人该做什么,然后再细化:“打完招呼后挥手”。每处改动都会高亮显示,一键即可保留或撤销。它绝不会编造机器人做不到的事。

可用
Sentio OS 中“记者”技能的触发器:机器人遥控器上的 Y + F2 键

技能与触发器

保存为技能的 Flow 会出现在动作列表中,可通过按键、手腕动作或机器人看到的东西来启动。

可用
Sentio OS 中的机器人摄像头识别出人脸并标注为“Martin”,墙上有 AprilTag 标记

摄像头与视觉

物体与人员检测、AprilTag 标记、人脸识别并按姓名问候、场景描述。

观看 →可用 · RealSense 摄像头
Sentio OS 中与机器人的对话:Senti 采访一位教师,用捷克语和英语回答

语音与对话

聆听、语音指令、对话智能体和语音合成。支持英语、捷克语和斯洛伐克语。语音识别(NVIDIA Parakeet)和语音合成(Piper)无需联网即可在本地运行,您也可以选择云端。使用本地模型时,数据不会离开机器人。

观看 →可用 · 麦克风
Sentio OS 中的手势训练器:机器人的 3D 模型根据输入的句子做手势

手势

机器人边说边做手势:手势根据每句话的内容规划,停顿时保持,双臂协同。含蓄、自然或富有表现力的风格,可在 3D 模型上预览。不说话时,它会呼吸,手臂自然轻摆。

可用
Sentio OS 中的讨论:按姓名标注的发言人按钮,聆听、准备并说出机器人的回答

小组讨论

机器人在圆桌旁入座。它聆听发言人、作出回答,并根据自己是在说还是在听来做手势、亮灯。填充语句即时播放,没有尴尬的停顿。

可用 · 麦克风
Sentio OS 中的 Sentio 夹爪控制:打开、闭合、停止,以及手动录制动作并回放

手臂与夹爪

手把手引导示教手臂位置,在桌面上方的网格上作业,跟踪物体,用 Sentio 夹爪取放。

观看 →可用 · Sentio 夹爪
Sentio OS 中的地图:已命名的地点、区域,以及绘制墙体和玻璃的工具

行走与导航

走向标记、搜索标记、借助 LiDAR 沿空旷区域行走,或让人牵着机器人的手带路。地图会在每次行走中自行完善,还可以在上面画出墙体和玻璃。

观看 →可用 · LiDAR 可选
Keynote & Show 中的一句机器人台词:瑞典语文本、根据语音自动生成的手势、音频生成以及在机器人上播放

演出与表演

Keynote & Show:主持人和机器人的台词配合音效,从一处统一播放。每句台词的手势自动生成。

观看 →可用
Sentio OS 中的监控:背包温度、CPU 负载、风扇和 USB 设备的 24 小时历史记录

监控与黑匣子

遥测、负载与温度、硬件看门狗、记录事件经过的黑匣子,以及一键全停按钮。

可用
Sentio OS 中行走时的安全停止:机器人在 LiDAR 探测到的障碍物前 60 cm 处停下

安全运动

手臂绝不会突然跳动,STOP 会以受控方式制动。机器人开始行走或过热时,Sentio 会释放手臂,以保持平衡并保护电机。“停止一切”同样会停止自动手势。行走中,机器人会在 LiDAR 探测到的障碍物前停下。

可用
交互式 Sentio OS API 文档(OpenAPI 3.1):/api/v1 下的端点列表

REST API 与 Python SDK

界面所做的一切都是 /api/v1 下的 HTTP 调用,机器人上自带交互式文档。SDK 是一个轻量的 Python 客户端,我们可应要求发送给您。

Developer Preview
Sentio OS 中的协作机器人动作:挥手、点头、摇头;勾选的动作会成为 Flow 中的积木块

其他机器

Flow 可以驱动协作机械臂和 Shelly 智能插座:人形机器人启动一台机器,或把零件递给协作机器人。

观看:人形机器人与协作机器人 → 已演示
Senti 用夹爪握着移液器,位于摆有实验室器材的桌子上方

遥操作

无需 VR 头显、无需高性能 GPU 即可远程控制手臂,用于演示和数据采集。

开发中

其他人形机器人

已在 Unitree H2 上测试:行走和基础 Flow 可以运行,手臂位置还需针对更长的手臂进行调校。暂不支持。目标是打造一个共享能力层。

已测试 · 暂不支持
界面一览

同一个网页界面,笔记本电脑、平板或手机皆可使用。

菜单按您要做的事来组织:Home、Robot、Devices、Run 和 Teach。内置帮助。支持英语和捷克语。

Sentio Flow

看得懂的行为。

看到人时 → 打招呼 → 挥手 → 走到标记“桌子”。

积木块按机器人的工作方式命名:Talk、Look、Arm、Walk。制造业人员可以切换到工厂术语,积木块旁边还会逐行列出程序。

Flow 在启动前会经过检查,并显示正在执行哪一步。把它保存为技能,它就有了自己的触发器。自己的技能在 Flow 中搭建;专用技能可由集成商交付。

Sentio OS · Flow
Sentio Flow:如果看到人,就说“我看到你了”并挥手;否则问“有人在吗?”

如果看到人:说“我看到你了”并挥手。否则:问“有人在吗?”

在哪里运行

三种运行方式。机器人原封不动。

Sentio OS 是一个面向 64 位 ARM 的 Docker 镜像。它与机器人的原厂软件并行运行,绝不改写它。关闭它,机器人就和以前一样工作。

G1 EDU 机内

把容器安装到机器人的第二台计算机(Jetson Orin NX)上。纯软件,无需额外硬件。

  • Sentio Start 免费,永不过期
  • Sentio Pro 试用 14 天
  • REST API 与 Python SDK
下载并安装

Sentio Backpack

机器人背着的成套方案:Jetson Orin Nano Super、由机器人电池供电、Sentio 夹爪,已安装并测试。只需在机器人颈部接一根以太网线。

  • 到货时已接线并测试
  • 无需改动机器人内部
  • €2,990,不含增值税,许可证另计
套件内容

自备开发板

带 Docker 的 64 位 ARM Linux,8 GB 或以上内存,NVMe 存储,以有线以太网连接机器人。目前无需 GPU。

  • Jetson Orin 已验证
  • RK3588 开发板应可使用
  • 购买前请先咨询我们
开发板要求
价格

一个许可证。一个价格。

许可证绑定一台机器人,有效期一年,含更新。它是一个签名文件:机器人无需连接任何地方,因此在展会上和封闭网络中都能使用。永久许可证可按需提供。

免费Sentio Start · 场景(循环最多 5 次)、通过按钮或手柄触发自动化、说话与聆听、手势、手臂姿势、腰部、夹爪、摄像头(标记、物体、颜色)以及一个 Shelly 插座。永不过期。
€5,900Sentio Pro · AI(对话、“你看到了什么”、AI 助手)、人脸识别、行走、导航、地图、LiDAR、Show、语音手势、无人值守运行、协作机器人 · 每台机器人每年,不含增值税,含更新
14 天Sentio Pro 试用 · 免费,在 Hub 中用设备 ID 激活
创始合作伙伴首批部署条款单独商定 · 与我们洽谈
面向所有者与开发者

启用与上手。

面向已购买或即将购买人形机器人、并希望它尽快投入使用的公司。

Sentio Robot Launch

从未开封的包装箱到安全运行的机器人。

  • 开箱、校准、电池与供电
  • 网络、备份与安全规则
  • 基础运动程序与演示模式
  • 操作员培训与文档
咨询 Robot Launch

Developer Onboarding

面向您的开发人员和工程师的技术培训。

  • SDK、REST API 与 Python 访问
  • 摄像头、麦克风与传感器数据
  • 在 PC2 上或背包中运行 Sentio OS
  • 您自己的第一个程序
培训您的开发人员

试点

我们一起验证人形机器人的一个具体新用途。

  • 物体操作(Sentio 夹爪)
  • 视觉检测与跟踪
  • 语音 AI 助手(Gemini)
  • 互动式接待员或向导
提议试点

您希望人形机器人在贵公司做什么?

不需要技术需求书。告诉我们您想尝试什么,或者安装 Sentio OS,亲自体验。