跳转至

术语表与支持

查表用的附录:两种形态共用的术语、反馈渠道与相关仓库。PC 版的 RobotConfig 配置项与 SDK 入口在 RobotConfig 与 SDK;报错见 PC 版的故障排查或背包版的故障排查。

术语表

术语 含义
XTac UMI G1 穿戴式 UMI 数采夹爪,两种形态共用的传感器载体;见认识 XTac UMI G1
数采背包 背包版的采集单元:RK3588 计算节点,夹爪与头显都接到它上面,XTac UMI Collector 在它上面运行;正式名 XTac UMI 数采背包,见认识数采背包
XTac UMI Collector 数采背包上的采集软件,接入相机、夹爪 MCU 与头显位姿,负责录制、回放、导出与设备管理;版本基线 0.4.3,以系统页为准
控制台 Collector 的浏览器界面,平板、手机、电脑连上背包后打开;实时监控、项目、系统等页面都在里面
项目 / 任务 / episode 背包版的数据组织层级:项目下建任务,任务带 LeRobot 语言指令,每次开录到停录是一条 episode
MCAP 背包版每条 episode 的原始记录格式,按 topic 存相机、编码器、IMU、位姿与事件;导出 LeRobot 时从它转换
OTA bundle 背包版 Collector 的升级包(.tar.zst),在控制台 系统 → 系统更新 页上传、校验、应用并重启,可回滚到上一版本;PC 版夹爪固件的 OTA 见固件升级
SoftAP 数采背包自建的常驻 WiFi 热点,SSID xense-<序列号后 6 位>,只有 5GHz,网关固定 192.168.44.1;不依赖现场网络的兜底入口
TacCap 包名 xense.taccap、设备类型 taccap_gripper 与背包机身标签里的名字(Tactile Capture);产品名为 XTac UMI G1
UMI Universal Manipulation Interface,手持式主夹爪数采范式
Leader / Follower 主夹爪 / 从夹爪;序列号 patch m = leader,s = follower
V2.1(固件) 固件的命令集版本,表示实现了哪些命令,不是构建号(构建号是 leader ≥ 1.2.0 / follower ≥ 1.1.0,更高版本同样支持),也不是帧格式(帧格式为 V1.8)。行程标定命令由 V2.1 引入 → 三套编号
单左双右 4 位序列号最后一位:奇→左,偶→右;夹爪、传感器与追踪器都按这条规则,见序列号与左右识别
GSPS 视触觉传感器(左右指各一),序列号 GSPS01...
XC 腕部 UVC 相机,序列号 XC...
XTac UMI XR 装在 Pico4 头显上的 VR 客户端 APP(原名 XenseVR-Toolkit),把头显与追踪器位姿送到采集单元,启动瞬间建立世界坐标系;见 Pico4 头显与追踪器配置
XenseVR PC Service / 运行时 接收头显位姿的服务,是 XTac UMI XR 在采集单元这一端的对端(服务名没跟着 APP 一起改):PC 版是数采主机上的守护进程,要手动启动;背包版内置在 Collector 里
tcp Tool Center Point,末端执行器位姿(tcp.x/y/z + 6D 旋转 r1..r6),坐标系见坐标系
6D rotation 旋转矩阵 R(世界 ← 本体)的前两列:r1..r3 = 第一列 = 本体 X 轴在世界系下的方向,r4..r6 = 第二列 = Y 轴;第三列为叉积,可算回 → 约定详解
shifted-frame 移位帧配对:t-1 观测配 t 动作
self-driven 自驱动:设备自身产出观测与演示动作,无独立遥操端

支持与反馈

遇到问题:

  1. 先查故障排查:PC 版见故障排查(含常见问题),背包版见背包版故障排查。
  2. 文档内容、链接或示例问题提交到文档仓库 Issues。
  3. 硬件、固件、缺件或返修问题请联系售后团队,并提供设备 SN。

反馈时请附带:

  • 完整报错原文,以及对应的日志:
    • PC 版:附该次运行的完整日志 ~/xenselogs/session_<时间戳>.log,不要只贴屏幕末尾几行,见 PC 版故障排查。
    • 背包版:附控制台系统日志面板的截图,并注明报错出现的大致时间;该面板不导出日志文件,不用去设备上找。
  • 设备身份:背包版抄控制台 系统 → 设备信息 页的设备 SN、采集单元版本与每只夹爪的 SN / 固件版本;PC 版给 scan_grippers 的 side / role / firmware_sn 输出和如何查版本里那条命令的输出。
  • 复现步骤、完整命令或控制台操作、单夹爪 / 双夹爪、是否启用追踪器。
  • 涉及相机或硬件装配时,附设备连接和异常画面照片。

参考资料

下表中的仓库除夹爪模型外都属于 PC 版;除 xensesdk(许可证未声明)外均开源;背包版的采集软件不开源,不在此列。

资源 地址 说明
数采主仓库 xense-taccap-lerobot https://github.com/XenseRobotics-AI/xense-taccap-lerobot PC 版采集软件,附带设备说明与 CHANGELOG
夹爪 SDK TacCap-Gripper https://github.com/XenseRobotics-AI/TacCap-Gripper 子模块 third_party/taccap-gripper/;SDK 文档在 docs/ 目录
追踪器 PC 服务 XenseVR-PC-Service https://github.com/XenseRobotics-AI/XenseVR-PC-Service 不是子模块,以 .deb 安装到 /opt/apps/roboticsservice,见一键安装
视触觉传感器 SDK xensesdk https://github.com/XenseRobotics/xensesdk 文档站
夹爪模型 XTac-UMI-Description https://github.com/XenseRobotics-AI/XTac-UMI-Description 主夹爪(左 / 右)与从夹爪的 URDF、Xacro、MJCF、USD 模型,含从夹爪法兰转接件;支持 ROS 2 与纯 Python
本地可视化工具 xense-lerobot-viewer https://github.com/XenseRobotics-AI/xense-lerobot-viewer 开源,在浏览器里查看本地 LeRobot 数据集

文档版本与配套软件

本手册的版本号独立于各软件,页脚标注的就是当前文档版本。每个文档正式版对应下面四个软件的一组版本,四者一起定版、一起更新; 设备上的版本与这张表不一致时,以这张表为准升级,或使用与设备版本对应的文档版本。

文档版本 xense-taccap-lerobot(PC 版数采) XTac UMI XR(头显应用) XTac UMI Collector(背包版采集单元) TacCap-Gripper SDK(夹爪 SDK)
v0.1.2 v0.1.1 0.3.6 0.4.6 0.4.3
v0.1.1 v0.1.1 0.3.3 0.4.3 0.4.3
v0.1.0 v0.1.0 0.3.2 0.4.3 0.4.1

夹爪固件随 SDK 附带(0.4.3 含主夹爪 1.2.6、从夹爪 1.2.16),不单列。各组件升级见 PC 版 · 版本与升级 与 背包版 · 版本。

本手册范围

本手册覆盖从数采夹爪硬件到数据落盘的链路:背包版到 MCAP 记录与 LeRobot 导出,PC 版到 LeRobotDataset;模型训练、推理、部署不在范围内,见对应工程的独立文档。