Workflow
声动活泼
icon
搜索文档
为什么硅谷开始重新定义「AI 记忆」| 科技早知道
声动活泼· 2026-07-09 17:33
文章核心观点 - 端侧AI算力的爆发(如英伟达RTX Spark和苹果M5系列)为在个人设备本地构建AI驱动的个人记忆系统创造了硬件基础[5] - 云端大模型(如OpenAI)的本质是对世界公域知识的最大似然估计,不适合承载TB量级的个人私密知识与记忆,因此在AI生态中需要一个专门的角色来构建个人记忆层[9] - 将个人记忆系统部署在端侧(本地设备)比云端更具优势,主要因为用户对隐私和数据安全的天然倾向、避免上传决策的心理门槛、以及无需考虑网络和云服务成本[10][12][13] - Clipto.AI 公司正在构建一个100%本地运行的多模态个人记忆系统,旨在通过垂直整合技术栈,解决将云上AI架构迁移到复杂、异构的端侧环境时所面临的一系列独特挑战[14][17][40] 端侧算力爆发与AI记忆的必要性 - 英伟达发布的消费级PC AI超算芯片RTX Spark具有标志性意义,其1 Petaflop算力和128GB统一内存使得在笔记本本地运行120B至200B参数的大模型成为可能,实现了AI算力的“平权”[5][7] - 硬件就位后,核心问题在于AI需要记忆才能成为有效的个人助理,否则再强的算力也只是“聪明的失忆者”[5] - 互联网演进呈现层级化,AI时代也将如此,云端大模型负责存储世界知识,而生态中缺少专门记录和存储个人知识与记忆的玩家[9] 端侧记忆相较于云端记忆的优势 - 用户天然倾向于将珍贵、私密的数据存放在个人可控的端侧,而非完全开放的云端[10] - 将数据上传云端面临隐私安全顾虑、网络可访问性、存储与算力(Token)成本等多重决策门槛,阻碍了用户将所有记忆托付给云端[12] - 若算力与服务天然与数据同在端侧,用户无需进行额外决策,使用行为将变得无感和潜意识,这更符合构建个人记忆系统的“第一性原理”[13] 现有大模型记忆方案的痛点与局限 - 当前主流优化记忆的手段(如扩展上下文窗口Context Window、检索增强生成RAG、LoRA微调等)均未脱离大模型的原生框架[20] - 这些方案本质上是概率性的,无法精准定位和回忆具体的事实细节(如特定时间、地点的具体谈话内容)[22] - 个人数据量可达TB甚至百TB级,现有方案无法想象将如此海量的数据塞入上下文窗口或通过一个LoRA完整捕获,因此无法提供完整、无损的个人生命周期记忆[22] Clipto.AI 的产品理念与架构 - Clipto 是一个在用户本地PC上100%运行的应用,可授权访问本地硬盘、外接硬盘及网盘,内置10个涵盖音频、视频、人脸、OCR等领域的模型,将多模态数据转化为结构化知识单元,并构建时空对齐的知识记忆系统[14] - 产品核心功能包括:对记忆的随时查找(支持文本、语音)、在记忆基础上的二次生成与加工(如总结、预测)、以及作为与AI Agent对话的上下文背景[15] - 产品采用端云协同架构,支持跨硬件的记忆分享与协作,并为算力不足的设备提供云端算力补充[16] - 公司对“记忆层”的构想分为三层:无感的数据导入层、进行数据理解与知识提炼的模型与知识层、以及最终以Agent形式提供服务的交互层[34] 将云上AI架构迁移至端侧的挑战与垂直整合 - 端侧生态极其复杂异构,设备配置不同且为多应用多任务环境,需智能侦测用户环境与可用资源,并实时调度模型与任务,在高效处理的同时保障用户体验[17] - 带着云上思维框架看端侧行不通,端侧缺乏现成的AI架构可供依赖,被迫从最底层的芯片算子优化开始,进行涵盖算力调度、模型优化到Agent搭建的垂直整合[40] - 例如,为榨干苹果芯片等非英伟达硬件的算力,必须深入到芯片级、算子级进行优化[40] - 此过程技术壁垒高,但通过完整自研打通所有结构,建立了深厚的技术护城河[40] 创业公司在大厂阴影下的竞争策略与市场机会 - 尽管苹果、谷歌等OS巨头有动机和能力构建记忆层,但其公司基因(苹果是硬件公司,谷歌是云公司)和利益冲突(端侧记忆可能牺牲云上利益)可能导致其难以做好或不愿全力投入跨平台的端侧记忆系统[41][42] - 创业公司资源有限,需从具体人群和功能抓手切入,Clipto选择从拥有TB级本地音视频数据、对海量多模态记忆需求最强的视频创作者场景入手,但本质上面向所有需要个人记忆的用户[43] - 公司认为在AI时代,记忆层有潜力成为像“AI五层蛋糕”中独立的一层基础设施,而非大模型的附属,并有机会打造服务全球10亿职场人士的记忆层平台[45][46] 行业趋势与技术预判 - 端侧AI算力的显著提升并非偶然,行业深耕者相信AI算力将遵循类似摩尔定律的规律呈指数级增长[47] - 两个必然发生的趋势是:算力会不断增加,模型会不断变小(通过优化、蒸馏等方式),这只是时间问题[47] - 构建完整的个人记忆系统是一个值得以10年维度投入的事业,目前可能只完成了1/10的工作,未来在模型优化等方面仍有巨大空间[48] - 即使在端侧、数据不出设备的情况下,也能构建数据飞轮效应,例如用户对特定人物进行标注后,本地模型对该人物的识别会越来越准[45]