Chapter 0112 sessions · 13 video refs
一、年度战略:AI 从功能展示变成平台工程主线
Keynote、Platforms State of the Union 和 Apple Intelligence / Xcode 特别演讲共同给出年度主线:AI 不再只是用户看得见的功能,而是贯穿 App、系统入口、开发工具、运行时和质量治理的工程体系。
S13 refs
WWDC26 的 AI 主线首先是平台叙事:Keynote 面向用户解释 AI 体验,SOTU 面向开发者拆成能力层,382 再把这些能力组织成工程地图。
S23 refs
Apple 的 AI 不是单一路径:Foundation Models、PCC、provider 抽象和本地运行共同构成端侧、本地、云侧和第三方模型的能力路由。
S34 refs
开发者工作流本身也是 AI 落地点:Xcode Agents、UI 原型、本地化和特别演讲共同显示,Apple 希望开发者既构建 AI,也用 AI 改造工程流程。
S43 refs
AI 功能要进入发布流程,必须同时经过设计原则、评估框架和可观测工具的约束;否则只是 demo,不是可运营的平台能力。
Chapter 027 sessions · 13 video refs
二、系统行动入口:App 能力需要被协议化
Siri 和 Apple Intelligence 要可靠调用 App,App 必须把对象、动作、参数、结果和屏幕上下文结构化。App Intents / App Schemas 不是语音命令增强,而是系统行动层的能力合同。
A13 refs
App Schemas / App Intents 正在成为系统智能理解 App 能力的协议层,开发任务从写口令转向建模 entity、action、parameter 和 result。
A23 refs
实体建模、索引和屏幕上下文决定 Siri 能否理解真实业务对象;这使 App 的信息架构变成系统入口质量问题。
A34 refs
同一 App 能力会被分发到 Siri、Shortcuts、Widget、Spotlight 和屏幕上下文等多个系统表面,因此能力定义要稳定、可解释、可复用。
A43 refs
系统行动入口越强,越需要测试、权限和安全边界;App Intents adoption、agentic security 和 App Schemas 共同形成发布门槛。
Chapter 039 sessions · 13 video refs
三、模型运行栈:Foundation Models、PCC、Core AI 与 MLX 分层协同
模型能力被拆成高层 Foundation Models API、云侧 PCC 补位、底层 Core AI authoring/runtime、本地 MLX 实验和 Metal 性能优化。真正的架构问题是任务路由、部署形态、可观测指标和 fallback。
M13 refs
Foundation Models 是开发者接入 Apple Intelligence 的高层能力入口,但它必须和 PCC、搜索工具、Evaluations 和 provider 抽象一起理解。
M24 refs
PCC 的价值不是替代端侧,而是在复杂 reasoning、长上下文和更强模型能力上做云侧补位;应用需要端云路由策略。
M33 refs
Core AI 把模型 authoring、optimization、runtime integration 和 app 交付连接起来,使模型不再只是研究资产,而是可打包、可观测、可更新的工程资源。
M43 refs
MLX 与 Metal 组成本地模型实验和高性能内核的底座,适合低延迟、私有上下文、开发者工具和性能敏感场景。
Chapter 0410 sessions · 13 video refs
四、Agent 工程:任务执行必须进入可观测、可评估、可审计闭环
Agentic App 的难点不是让模型回答,而是让模型在 App 工具边界内执行多步任务,并对 prompt、tool call、state、权限、失败恢复和用户确认负责。
G13 refs
Foundation Models 正从内容生成走向 App 内任务执行;agentic UX 是状态化编排,不是单轮 prompt-response。
G23 refs
Agent 能执行真实任务的前提是 App 暴露模块化工具,并把工具调用、内容检索和系统行动边界接入同一条上下文链。
G34 refs
AI 质量治理必须从单次输出扩展到任务样本、judge、trace、prompt 变更、工具路径和多步 agent 流程。
G43 refs
Agentic security 的关键变化是模型能触发真实工具,因此权限、审计日志、用户确认和社交工程防护必须前置。
Chapter 056 sessions · 12 video refs
五、上下文入口:搜索、视觉理解和内容索引成为模型行动的燃料
模型要做对任务,必须拿到正确上下文。Core Spotlight、Visual Intelligence、image understanding 和 search UX 共同说明:App 内容、视觉场景、来源解释和权限过滤会决定 AI 体验质量。
C13 refs
Core Spotlight 正成为 App 本地内容的模型可读上下文层,metadata、实体和索引策略会直接影响 AI search 质量。
C23 refs
Visual Intelligence 的价值不是识别展示,而是把图像、屏幕和场景转成可执行任务入口。
C33 refs
AI 搜索体验必须补充来源、范围、置信度和纠错路径,否则模型结果会因为不可解释而损害信任。
C43 refs
多模态上下文最终要回到 App Intents 和系统行动:看见内容、找到对象、解释来源、执行下一步必须连成链路。