戴上眼镜,就能控物!俄罗斯团队让机械臂“秒懂”你的眼神
机器人大讲堂·2025-10-23 22:37
技术系统概述 - GazeGrasp系统通过眼神精确控制机械臂抓取和放置物体,无需手动操作 [2] - 系统引入“磁吸效应”功能,使操作效率提升31%,用户锁定目标物体的平均时间从6.77秒缩短至4.65秒 [2] - 整个抓取流程为用户注视目标物体3秒后机械臂抓取,再注视空白位置3秒后放置 [11] 核心技术组件 - 系统整合眼动追踪硬件,使用特制眼镜搭载ESP32 CAM摄像头模组实时捕捉眼球运动 [4] - 采用深度学习算法矩阵,包括谷歌MediaPipe框架追踪虹膜位置和YOLOv8模型识别物体 [6] - 通过三次多项式回归模型建立眼球运动与屏幕坐标的映射关系,并集成卡尔曼滤波器平滑眼动轨迹 [8] 应用前景与意义 - 该系统代表基于自然生理信号进行控制的人机交互创新方向,对肌萎缩侧索硬化症等运动障碍患者有重要价值 [14] - 技术在工业自动化、远程操作、危险环境作业(如核电站维护、深海探测)等场景有广阔应用前景 [14] - 13名志愿者测试数据显示磁吸效应引入产生显著统计学差异(F(1,24)=24.52, p<0.001) [15]