帮大家总结了一下凌晨的苹果WWDC26。

Apple Intelligence新架构 - 底层模型与Google Gemini深度合作,基于Gemini家族开发了5个模型,适配到端侧和Private Cloud Compute服务器运行[6] - 推出双端侧模型策略:基础版AFM 3 Core为3B小模型;高级版AFM 3 Core Advanced为20B的MoE模型,部署于iPhone 17 Pro、iPhone 17 Pro Max、iPhone Air、M4及以上且至少12GB统一内存的iPad、M3及以上且至少12GB统一内存的Mac等高性能设备,新增语音理解和生成能力[8][9][10][11] - 系统架构核心为“系统编排器”,负责协调四大能力:个人上下文理解、广泛世界知识、App Actions(通过App Intents框架调用第三方App)、屏幕感知[13][14][16][18][20][22] - 隐私方案强调端侧处理与Private Cloud Compute结合,数据端到端加密,仅用于处理请求,处理完立即删除,不存储且不可访问,外部专家可审计[7][23][24] Siri AI升级 - 新版助手命名为“Siri AI”,集成Apple Intelligence新架构,能力有“质的飞跃”[25][27][28] - 演示核心能力包括:结合网络搜索与私人信息的问答、基于屏幕感知与个人上下文的路线规划、照片筛选与共享、对话式多轮交互、Mac上Spotlight集成与多文件分析[30][31][32] - 在支持高级端侧模型的设备上,Siri拥有全新、更有表现力的语音,并支持自定义语音风格和语速[39][41] - 全系统听写引擎升级,拼写、标点和大小写更精准,内建于系统键盘,所有App可用[42][44] - 视觉智能集成进相机App,新增Siri模式,可识别拍摄物体并回答问题,例如账单分账或行李尺寸查询[45][47][48][50] - 写作工具深度集成Siri,支持自然语言生成文本,全系统自动校对拼写语法,Siri可根据联系人调整语气[52] - 首次推出Siri独立App,保存所有对话历史并支持跨iPhone、iPad、Mac平台通过iCloud加密同步,扩展至watchOS和visionOS[54][56][57][59][60] - 目前仅支持英语,欧盟和中国暂不可用,可用时间未知[62] 应用程序智能化 - Safari新增智能标签页整理、Notify Me(自然语言监控网页变化并推送通知)、Describe an Extension(自然语言生成自定义扩展)功能,强调隐私不追踪浏览数据[65][66][68][70][71] - 密码App新增自动更新弱密码或泄露密码功能,通过Apple Intelligence与Safari配合自动导航至网站修改[72][73][75] - 短信(Messages)和邮件(Mail)应用新增智能上下文建议与一键操作[76][78] - 日历(Calendar)支持自然语言添加和编辑事件[80][82][83] - 电话(Phone)新增“Call Context”功能,通话时自动从其他App(如邮件)提取相关信息(如确认码),端侧运行[85][87][89] - 家庭(Home)App支持用Apple Intelligence理解并合并摄像头通知,分析录像片段并支持自然语言搜索[91][93] - 快捷指令(Shortcuts)支持用自然语言描述创建自动化工作流,例如离开公司时自动发消息告知预计到家时间[94][95] 创意与影像增强 - Image Playground支持写实风格图片生成,基于Private Cloud Compute上与Gemini合作的新模型,可用照片库人物生成图片,支持自然语言修改和触摸手势编辑,可生成联系人海报和锁屏壁纸,并向开发者开放API[97][99][100][102] - 照片AI编辑三件套升级:Cleanup去除干扰物效果更好;Extend可扩展图片边界;Spatial Reframing(空间重构)支持拍照后重新调整构图,利用端侧空间模型预览和Private Cloud Compute生成模型填充新区域[105][107][109][110][111] 开发者工具更新 - Xcode更新包括一键App本地化、与模拟器虚拟设备直接交互、支持自定义skills,代码助手可选择不同AI模型(包括Google Gemini),并可连接Figma、GitHub等外部工具[113][115][116] - 测试工具推出全新Device Hub,统一管理模拟与真实设备,支持模拟多点触控、切换深色/浅色模式、动态调整窗口大小测试[117] - 推出Foundation Models Framework,开发者可在App中使用端侧模型,新增图像输入支持、自定义Skills,并能用Swift API调用服务器端模型[118] - 推出Core AI Framework,允许开发者在所有苹果平台上利用Apple Silicon全算力本地运行自有或第三方模型[119] 系统体验与性能升级 - Liquid Glass设计语言在iOS 27上优化模糊算法,新增透明度滑块,macOS上调整工具栏、侧边栏、窗口圆角及App图标[121][123][124][126] - 性能显著提升:iPhone和iPad上App启动速度快30%,新照片在图库出现速度快70%,隔空投送速度快80%,iPad外接硬盘文件浏览传输速度快5倍[128] - 重建聚焦搜索、照片和邮件的搜索索引,新内容近乎实时入索引,邮件搜索新增排名系统提升结果准确性[129][130] - 其他更新包括:iCloud共享相册支持Android/Windows用户加入及全分辨率共享;AirPods支持自定义EQ;Apple Vision Pro全景照片可转为深度空间场景;地图Flyover航拍影像升级;网络切换更智能;信息App大文件发送显示进度;无障碍功能深度集成Apple Intelligence[132][133][134][135][136][137][138][139][140]

帮大家总结了一下凌晨的苹果WWDC26。 - Reportify