上海智位机器人发布 seeMote 系列:为 Apple Vision Pro 提供空间外设操控方案
上海智位机器人(DFRobot)近日发布 seeMote系列。该系列包括 seeMote Cube和seeMote Cap两款产品,面向空间计算应用开发者、XR 解决方案提供商、工业培训、教育实验、医疗教学模拟及 3D 创作等专业场景,提供可定位、可编程、可追踪、可集成的实体空间输入方案。
随着空间计算设备逐步进入专业应用场景,开发者对稳定空间参考、精准姿态输入以及真实工具追踪的需求正在增加。传统手势交互适合轻量化操作,但在工业仿真、职业培训、医疗教学、实验教学和 3D 建模等需要真实操作感的场景中,仅依赖悬空手势往往难以满足稳定性、精确性和操作反馈需求。

seeMote正是为这一变化而设计,通过Cap实现实体工具追踪,借助Cube完成高精度的手持控制能力,帮助开发者将真实工具、手持控制和现实操作过程无缝接入visionOS应用。相比从零开始构建追踪与输入硬件,该系列产品可帮助开发团队更快完成原型验证、场景测试与应用集成。
值得注意的是,苹果联合DFRobot与MIKROE推出了标准化空间配件,DFRobot这两款正是其中的核心硬件。

从手势交互走向实体空间输入
过去几年,空间计算应用主要依赖手势、眼动、语音或通用控制器进行交互。这些输入方式在娱乐、展示和轻量办公场景中具有优势,但当空间计算进入专业工作流时,开发者开始需要更加稳定、可控、可复现的实体输入方式。
例如,在工业培训中,用户可能需要使用真实螺丝刀、扳手或装配工具完成操作训练;在医疗教学模拟中,学生可能需要握持接近真实器械的训练工具;在实验教学中,学习者需要使用实验器具完成步骤练习;在 3D 创作场景中,设计师希望通过具有实体触感的设备进行模型旋转、缩放、移动或绘制。
这些场景的共同需求是:真实工具不仅要被用户握在手中,也需要被空间计算系统感知。也就是说,空间应用需要知道工具在哪里、朝向哪里、正在如何移动,并将这些信息实时映射到数字环境中。
seeMote Cap:让真实工具进入数字空间
seeMote Cap是一款轻量、小型的可安装式空间追踪设备,可固定在多种手持工具、教具或训练器具表面,使真实物体具备可追踪的空间姿态能力。
开发者可将 seeMote Cap安装在画笔、螺丝刀、实验器具、训练用手术器械、教学模型或其他手持工具上,使这些真实工具在空间计算应用中被识别和追踪。设备支持 6DoF 姿态输入,可将工具的位置、方向和运动状态同步至虚拟环境中,帮助应用实现真实工具与数字对象之间的空间映射。

DFRobot seeMote Cap可固定在多种手持工具表面
通过这一方式,开发者无需自行设计复杂的追踪硬件,即可让真实工具参与空间交互。例如,在职业培训中,学员可以使用真实工具完成装配动作,应用系统同步显示操作路径和步骤反馈;在医疗教学模拟中,学生可以使用训练器械完成手法练习,系统可基于工具姿态提供教学反馈;在实验教学中,教师可以将实验器具动作映射到虚拟实验流程中;在创作场景中,用户可以使用画笔、雕刻工具或其他实体工具进行空间绘制和模型编辑。
与传统通用控制器相比,seeMote Cap的优势在于保留了真实工具本身的握持方式、操作阻力和使用习惯。用户操作的不是抽象控制器,而是接近真实任务流程的工具本体。这使得空间计算应用能够更自然地服务于教学、培训、创作和模拟场景。
seeMote Cube:面向空间计算应用的空间手持设备
seeMote Cube是一款面向空间计算开发场景设计的空间手持设备,它为开发者提供稳定的空间参考和可编程实体输入能力,适用于空间应用开发、交互原型验证、行业场景测试和解决方案集成。
seeMote Cube可放置在桌面、操作台或训练区域中,为空间计算应用提供稳定的物理参考。开发者可以基于该设备建立虚拟内容与真实环境之间的对应关系,使虚拟对象更稳定地固定在特定操作区域内。在符合设备工作条件的环境中,该设备可为应用提供持续、稳定的定位参考,降低复杂环境对空间定位体验的影响。

DFRobot seeMote Cube 空间手持设备
作为手持交互设备,seeMote Cube支持 6DoF 姿态输入,可输出位置与旋转信息,用于虚拟对象操控、空间菜单选择、工具切换、模型编辑和交互测试。同时,设备配备多个可编程实体按键与震动反馈能力,开发者可根据不同应用场景,将按键映射为抓取、确认、撤销、缩放、旋转、模式切换等操作,并通过震动反馈增强空间交互中的触觉提示。
在 3D 建模场景中,用户可通过 seeMote Cube 对模型进行旋转、平移、缩放和视角控制;在工业模拟场景中,开发者可将其配置为特定工具或控制器;在多人协作和专业培训场景中,该设备也可作为稳定的实体参考点和交互入口,帮助应用实现更可控的空间操作流程。
两款设备协同,构建实体空间交互基础

DFRobot seeMote Cap & seeMote Cube
seeMote Cap和seeMote Cube可分别满足手持控制和真实工具追踪需求,也可在同一应用场景中协同使用。
在一个典型的工业培训应用中,seeMote Cube可作为操作区域的空间参考点,帮助虚拟零部件稳定呈现在真实工作台上;同时,seeMote Cap可安装在螺丝刀、扳手或其他训练工具上,将学员的工具姿态同步到应用中。系统由此可以识别用户是否拿起了正确工具、是否按照正确角度进行操作,以及是否完成了预设步骤。
在医疗教学模拟场景中,seeMote Cube可用于建立训练区域的空间参考,seeMote Cap]可安装在训练用器械上,用于模拟手术路径、器械角度和操作流程。需要说明的是,该类应用主要面向教学、训练和模拟场景,并不代表产品可直接用于临床诊疗或真实手术操作。

医疗教学模拟场景
在航空维修教学、飞行操作教学或复杂设备训练场景中,该系列产品也可用于构建培训原型和模拟系统,帮助开发者验证空间交互流程。相关应用应根据行业要求进行进一步认证和系统级验证。
面向开发者的开放集成能力
作为一家长期服务开发者和开源硬件社区的公司,DFRobot在seeMote 的设计中延续了开放、可编程和易集成的产品理念。
该系列产品面向开发团队提供可调用的空间姿态数据、实体按键事件和反馈控制能力,便于开发者将设备集成到空间计算应用、XR 原型系统或行业解决方案中。根据不同开发需求,开发者可将设备数据映射为虚拟对象控制、工具姿态同步、操作流程识别、空间菜单交互或多步骤训练反馈。
面向专业场景,降低空间交互开发门槛
空间计算正在从内容展示和沉浸体验,走向更复杂的专业应用。对于开发者而言,真正的挑战不仅是把虚拟内容放进现实空间,更是如何让用户用真实、稳定、可控的方式与数字内容发生交互。
seeMote系列的推出,正是为了降低这一过程中的硬件开发门槛。开发团队无需从零设计追踪模块、实体输入设备或工具姿态同步方案,即可围绕真实工具和真实工作流快速构建空间交互应用。
该系列可广泛应用于:
● 工业装配与维修培训
● 职业教育与技能训练
● 医疗教学模拟和手术流程训练
● 实验教学与虚拟实验室
● 3D 建模、空间绘制与创作工具
● 航空维修教学与操作流程模拟
●多人协作、远程指导和复杂任务演示
通过实体空间输入硬件,开发者可以更容易地将真实世界中的工具、动作和流程转化为空间计算应用中的可识别数据,从而构建更自然、更专业、更接近真实工作环境的交互体验。
上市与开发者支持
seeMote Cap 与 seeMote Cube 计划于 2026 年秋季上线。开发者可访问DFRobot seeMote 官网 https://www.dfrobot.com/seemote 了解更多信息。开发者也可通过 Apple Developer 网站了解更多 visionOS 开发信息。















