加州大学圣地亚哥分校和麻省理工学院的研究员们搞了一个叫Open-TeleVision的项目，听起来有点酷炫。这个玩意儿是一种开源的远程操作系统，号称能让你从3000英里外轻松操控机器人，还能精准地玩弄各种物体，活脱脱就是电影《阿凡达》里的那种高科技场景。

先来说说这个系统的适配性，真是无敌了。你只要有Vision Pro、Quest、Mac、iPad、iPhone这些设备中的任何一个，就能轻松上手。它支持实时立体视频流，能让你对空间和深度一目了然，操控起来简直是丝滑顺畅，根本停不下来。

核心理念

这个Open-TeleVision系统最大的卖点，就是通过VR头显，你可以隔空操控机器人，不需要其他任何穿戴设备。它模拟了人类的双目立体视觉和活动颈部，让你感觉自己就是机器人，沉浸感爆棚。

技术亮点

• 沉浸式体验:告别传统2D视频的平庸，VR头显让你看到的是3D视频，左右眼图像不同，形成自然的立体视觉，空间距离精确无比。

• 活动颈部:机器人有个活动颈部，模拟人眼的聚焦方式，你只需转转头，就能观察不同区域，操作起来就跟玩儿似的。

• 计算效率:专注图像中心的小部分，减少高分辨率广角图像的处理需求，计算效率和系统帧率直线上升。

实现方法

• 使用逆运动学算法，把VR头显提供的API映射到机器人身上，实现动作的精确传递。

• 系统基于Web平台，随时随地用任何设备的浏览器访问，低延迟高效能，远程操作毫无压力。

遥操作的挑战与解决方案

• 自由度匹配:通过Mapping过程，解决人形机器人和人体自由度不匹配的问题，几乎任何机器人都能找到合适的映射方式。

• 数据采集与学习:通过遥操作方式采集的数据训练机器人自主完成任务，效果显著，系统的可靠性和泛化能力杠杠的。

项目地址:https://github.com/Improbable-AI/VisionProTeleop

---

编辑：一起学习网

标签：机器人,颈部,系统,操作,让你,就能,自由度,能让,图像,方式