多模态感知模型
搜索文档
相约杭州!具身智能之心首次赞助IROS并现场颁奖
自动驾驶之心· 2025-10-20 14:30
挑战赛概述 - 挑战赛旨在系统性评估机器人在真实场景下的感知与理解能力 以应对动态人群 恶劣天气 传感器故障等复杂环境条件[1] - 挑战赛致力于推动多模态感知模型的稳健性研究 鼓励跨模态融合与任务泛化方向的创新探索[1] - 该赛事由新加坡国立大学 南洋理工大学 香港科技大学 密歇根大学机器人研究院等多家研究机构联合主办 并作为IROS 2025官方认证竞赛项目[4][5] 赛道二:社交智能导航 - 赛道核心目标是打造具备"社交智能"的自主导航机器人 使其能安全 高效且符合社会规范地在动态室内环境中穿行[8][9] - 任务要求机器人在无地图 无特权信息的前提下 仅基于RGBD视觉与里程计输入完成目标导航任务 且不影响人类行为[9][10] - 关键挑战包括动态行为建模 社交规则编码 不确定性处理 评测维度涵盖成功率 路径效率及路径社会性指标等[12] 技术方向与活动 - 推荐技术方向包括使用Transformer-based社交轨迹预测模块 引入行为分类器进行风险判断 以及多主体地图编码与图神经网络[15] - 挑战赛重要日期包括第一阶段截止日期为2025年8月15日 第二阶段截止日期为2025年9月15日 获奖决定将于2025年10月19日在IROS 2025公布[3] - 联合主办方将在IROS 2025大会期间于中国杭州举办线下展示与颁奖 并提供与学术 创业 投资领域专家交流的after party活动[5][16][18]
相约杭州!具身智能之心首次赞助IROS并现场颁奖
具身智能之心· 2025-10-17 08:04
赛事背景与目标 - 机器人感知系统在动态人群、恶劣天气等复杂真实环境下面临稳定性、鲁棒性与泛化能力的挑战,传统算法性能易大幅下降 [1] - RoboSense Challenge 2025旨在系统性评估机器人在真实场景下的感知与理解能力,推动多模态感知模型的稳健性研究,鼓励跨模态融合与任务泛化创新 [1] - 赛事终极目标是让机器人具备"社交智能",学会"察言观色"和"绕道避人",从而安全融入人类生活空间 [6] 赛道二:社交导航机器人 - 赛道聚焦于开发基于RGBD视觉与里程计的感知导航系统,使机器人在无地图、无特权信息前提下,于动态室内环境中安全、高效且符合社会规范地穿行 [9][10] - 具体任务要求机器人基于RGB-D输入实现目标导航,且导航过程不影响人类行为并符合社会规范 [11] - 挑战难点包括动态行为建模、社交规则编码、不确定性处理以及多维度的性能评测 [13] 技术挑战与推荐方向 - 动态行为建模挑战在于从视觉输入中提取人类轨迹趋势、意图与互动潜力 [13] - 社交规则编码挑战在于将"避让老人"、"保持安全距离"等非显式规则嵌入策略模型 [13] - 不确定性处理需引入轨迹分布预测与多解融合机制以应对路径冲突、遮挡等不可预测因素 [13] - 推荐技术方向包括使用Transformer-based社交轨迹预测模块、行为分类器进行风险判断,以及多主体地图编码与图神经网络进行结构建模 [16] 赛事安排与合作伙伴 - 赛事注册从2025年6月开始,竞赛服务器于6月15日上线,第一阶段截止日期为8月15日,第二阶段截止日期为9月15日,获奖决定将于10月19日在IROS 2025大会上公布 [4] - 赛事由新加坡国立大学、南洋理工大学、香港科技大学、密歇根大学机器人研究院、加州大学欧文分校、上海人工智能实验室等多家研究机构联合主办,并作为IROS 2025官方认证竞赛项目 [5][6] - 赛事颁奖及线下展示将在IROS 2025大会期间于中国杭州举行 [6] 评测标准与活动 - 机器人导航性能评测维度包括成功率、路径效率、路径社会性指标PSC以及碰撞统计H-Coll [13] - 具身智能之心将在10月21日上午于IROS 2025现场进行直播 [14] - 具身智能之心联合Abaka AI为参会者提供after party活动,涵盖学术、创业、出海、投资等领域交流,报名截止时间为10月20日24:00 [17][18]