⚡ News

Meta开放Ray-Ban AR眼镜接口:第三方开发者可接入镜片显示与手势控制

Meta开放Ray-Ban AR眼镜接口:第三方开发者可接入镜片显示与手势控制

Meta 近日宣布向开发者开放 Ray-Ban Display 智能眼镜的开发者预览版,首次允许第三方应用程序接入其镜片内显示屏。这意味着开发者可以对现有的 iOS 和 Android 应用进行适配,使其内容直接投射到眼镜镜片上,或者利用 HTML、CSS 和 JavaScript 构建独立的 Web 应用程序。该平台支持图层叠加、实时数据传输、微型应用(micro-apps)以及游戏等多种形态。

开发者可以通过 “Meta Wearables Device Access Toolkit”(智能穿戴设备接入工具包)来获取这些能力,该工具包提供了适用于 Android 和 iOS 的原生 SDK。值得关注的是,Web 应用可以通过标准 URL 直接进行托管,无需经过专门的应用商店审核分发。这种双重架构设计让开发者在原生应用集成与基于 Web 的快速部署之间拥有了极大的灵活性。

在硬件交互方面,该工具包支持在镜片内显示屏上呈现文本、图像、按钮和视频等 UI 元素。早期的应用场景涵盖了导航指南、流媒体工具以及迷你游戏。此外,应用程序还可以深度集成 Ray-Ban Display 自带的 “Neural Band”(肌电手势腕带)控制系统。目前,Meta 尚未对提交的应用类型设定严格限制,也未公布是否会对第三方应用进行审核,这表明该开发者预览计划在向更广泛用户普及之前,仍处于迭代和演进阶段。

除了开发者预览版,Meta 还为现有的 Ray-Ban Display 用户推出了四项新功能。包括:允许通过 Neural Band 进行手势文本输入的 Neural Handwriting(手写输入);可捕获镜片屏幕画面的显示录制功能;扩大了在美国和欧洲主要城市的步进式导航覆盖范围;以及更广泛的实时字幕支持。更令人瞩目的是,由 Superintelligence Labs 开发的 Meta 首个专属 AI 模型 “Muse Spark” 将于今年夏天登陆 Ray-Ban Display。该更新预计将带来更强大的对话能力、购物助手功能,并支持类似于 Meta 其他智能眼镜上的多智能体(multi-agent)协作任务。

Meta 选择在此时开放 Ray-Ban Display 的第三方生态,正值谷歌、三星等合作伙伴即将基于谷歌 Android XR 平台推出竞争产品之际。Meta 目前尚未宣布开发者预览版何时结束测试,也未透露第三方应用何时会全面向普通用户开放。

【AgentUpdate 深度解析】Meta 此次向第三方开发者开放 Ray-Ban 镜片显示与 Neural Band 交互,是空间计算与端侧 AI Agent 生态演进的关键里程碑。不同于传统的语音助手,多模态 AI Agent 急需“眼”(摄像头)、“嘴”(音频)和“屏”(HUD镜片显示)的深度结合。通过开放原生 SDK 和无门槛的 Web App 托管,Meta 正在试图利用轻量化的 MCP(Model Context Protocol)精神,绕过苹果和谷歌的应用商店税。同时,今夏即将引入的 Muse Spark 模型以及多智能体协作(multi-agent tasks)支持,意味着 Ray-Ban 智能眼镜正在从单纯的硬件外设,演变为端侧多智能体系统的“第一人称视场”交互中枢。通过 Neural Band 的微手势输入与多智能体后台的无缝配合,未来的 AI Agent 将真正实现无感化、具身化的主动式服务,这对于构建下一代分布式智能体网络具有颠覆性的启示意义。

↗ 阅读原文