WWDC26 · 297Best practices for integrating visual intelligence in your app
当前 0:09 9s官方 ↗
Session 297·Best practices for integrating visual intelligence in your app·深度内容已验证 · 5 sections · 6 cards
深度内容已验证

视频证据

已具备 session-specific claims、anchors、evidence refs、脚本分段和 CDP 验证;这是可审核完成态。

正在接入 Apple HLS 视频源…

脚本分段

分段导航

每段对应一个视频时间段,说明“讲什么、支撑哪条洞察、对应哪些锚点”。完整字幕不在公开页复刻。

多模态入口:Visual Intelligence 不是识别展示,而是任务入口

deep_candidate

开场围绕 visual、intelligence、search、albums 展开,说明 297 的主题不是泛识别能力,而是视觉上下文如何进入 App 任务。它支撑 I1。

Visual IntelligencesearchApp IntentsIntelligenceVisual
确认 visual intelligence 是否被定位为任务入口。 · source segments: 0–54

查询与结果:intent、image、query、results 决定体验是否相关

deep_candidate

第二段出现 intent、image、query、results、catalog,说明视觉智能必须贴合用户当前任务并返回可解释结果。它支撑 I2。

searchVisual IntelligenceSiriApp Intentsmodel
复核 query/results 是否支撑任务相关性。 · source segments: 55–108

API 落地:intent、album、return、image 把视觉结果接到 App 数据

deep_candidate

中段围绕 intent、album、return、results、image 展开,说明工程重点是把视觉理解结果接到 App 数据模型和后续动作。它支撑 I3。

searchVisual IntelligenceProviderApp IntentsOpenIntent
确认视觉结果是否接入 App 数据和动作。 · source segments: 109–163

集成边界:search、view、code、content 决定用户是否信任结果

deep_candidate

第四段出现 search、view、albums、code、content,说明视觉智能的落地需要 UI 呈现、内容边界、权限和错误处理。它支撑 I4。

searchschemaVisual IntelligenceaiAI & Machine Learning
判断 view/content/search 是否构成信任边界。 · source segments: 164–217

系统收束:视觉结果要进入系统数据和可操作结果链

deep_candidate

收束段回到 visual、intelligence、data、system、results,说明视觉智能的价值在于把识别结果转成系统可处理的数据和用户可执行的下一步。它支撑 I5/I6。

Visual IntelligenceIntelligenceVisualsearchApp Intents
确认 visual intelligence 是否从识别走向可操作结果链。 · source segments: 218–272
下左 · 时间锚点

Anchor Skeleton

0:09↗
1:00↗
1:53↗
2:46↗
3:41↗
4:33↗
5:23↗
6:20↗
7:26↗
8:18↗
9:04↗
9:58↗
11:04↗
11:56↗
12:56↗
13:54↗
14:40↗
15:37↗
16:40↗
17:33↗
下右 · 深度内容已验证

Workbench Status

I1deep_candidate

结论 1:Visual Intelligence 的关键价值是把视觉上下文变成任务入口。

297 的核心不是展示模型能识别什么,而是让 App 基于图像、场景和屏幕上下文提供下一步行动。视觉智能要进入产品,必须变成任务链的一环。 这要求视觉能力和 App 任务设计绑定,而不是把识别结果孤立展示给用户。

I2deep_candidate

结论 2:结果必须与用户当前 query 和任务相关,否则就是噪音。

image、query、results 和 catalog 线索说明视觉智能的体验质量取决于相关性。用户需要知道系统为什么给这个结果,以及结果能解决什么当前任务。

I3deep_candidate

结论 3:视觉理解必须接入 App 数据模型和后续动作。

当 intent、album、return、image 与 results 同时出现,说明视觉智能不是孤立识别,而是要连接 App 数据、搜索结果和后续操作。

I4deep_candidate

结论 4:权限、内容范围、UI 呈现和失败处理决定用户是否信任。

视觉智能会触碰图像、内容和上下文边界。如果没有清晰的 view、source、scope、permission 和纠错方式,识别结果会变成不可信噪音。

I5deep_candidate

结论 5:高价值场景应优先选择明确、可验证、可行动的视觉任务。

297 的落地启示是不要追求泛化识别展示,而要优先选择高频、明确、可验证、有下一步操作的视觉任务,例如相册、商品、文档或内容搜索。 这类场景更容易定义成功标准、错误边界和用户可理解的下一步。

I6deep_candidate

总判断:297 是 Visual Intelligence 集成综述入口。

297 应与 246 搜索上下文和 343 App Intents 一起阅读:视觉智能负责把图像/场景变成输入,搜索负责找到内容,Intents 负责执行下一步。它是多模态能力进入 App 的入口样板。