公司与产品合作 - 字节跳动旗下豆包与上海浦东美术馆达成合作，成为“图案的奇迹：卢浮宫印度、伊朗与奥斯曼的艺术杰作”与“非常毕加索：保罗史密斯的新视角”两项国际大展的官方AI讲解员 [2] - 这是AI产品首次成为美术馆的官方讲解工具 [2] - 此次合作标志着AI技术在专业艺术普及领域的进一步落地 [6] 产品功能与体验 - 展览期间，观众可随时通过豆包App的“视频通话”功能或拍照提问方式，获取针对具体展品的专业讲解，即使轻声提问也能准确识别 [2] - 豆包提供通用和亲子两种解说风格 [2] - 在观展过程中，用户可以让豆包从艺术风格、历史背景、创作技法与文化意义等多个维度对作品进行解读 [4] - 豆包支持连续、深入追问，例如可对展品从画面场景描述切换到材质与技法细节的补充说明 [5] - 视频讲解功能基于Seed1.8模型的视频理解能力，能持续理解观众眼前不断变化的视角和场景，实现连续、自然、像人一样的对话交互 [6] 技术实现与挑战 - 双方通过独家数据合作和定向搜索优化，提升了豆包识别和讲解的准确性 [2] - 在博物馆场景中运用AI讲解，最大的挑战是保证内容的准确性，模型需能区分外观高度相似的文物、理解小众且缺乏公开资料的展品，并在观众移动观展时保持稳定识别 [5] - 例如，需精准区分风格与明代永乐年间青花牡丹纹盘非常接近的伊朗15世纪《牡丹纹盘》 [5] - 目前Seed1.8模型在视频感知、流式、视频理解方面都达到了SOTA水平 [6] 合作背景与行业意义 - 豆包此前已与中国国家博物馆、中国钱币博物馆等七家国家一级博物馆合作，共同打造数字化看展体验区 [5] - “图案的奇迹”是卢浮宫在中国举办的规模最大的展览，汇集约300件16世纪至19世纪艺术珍品 [3] - “非常毕加索”展出80件毕加索代表作品，构成国内迄今最完整的毕加索艺术呈现 [3] - 合作方表示，此次跨界合作让观众可借助AI与艺术家隔空对话、解锁展览背后的故事，实现艺术的“千人千面”，美育资源突破时空限制 [3] - AI产品通过提供可交互、可拓展、个性化的导览服务，为观众带来兼具深度与趣味的观展新体验，推动艺术文化传播与互动体验融合 [6]