IT之家 07-08
苹果联合哥伦比亚大学开发AI系统SceneScout,为盲人解锁街景导航
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_keji1.html

 

IT 之家 7 月 8 日消息,苹果与哥伦比亚大学的研究团队开发出了一项名为 SceneScout 的 AI 原型系统,旨在为盲人及低视力群体(BLV)提供街景导航辅助。

该系统结合苹果地图(Apple Maps)API 与多模态大语言模型(基于 GPT-4o 内核),生成定制化环境描述。IT 之家注意到,相关论文已经发表在预印平台 arXiv 上(未经同行评审)。

核心功能:

路线预览(Route Preview):

预判行程中的道路状况:人行道质量、交叉口、公交站特征等

虚拟探索(Virtual Exploration):

开放场景响应:根据用户需求(如 " 临近公园的安静居住区 ")提供方向指引

该系统可通过模拟行人的视角,解读可见内容,并输出结构化文本(短 / 中 / 长),适配读屏软件。

据介绍,SceneScout 在测试阶段招募了 10 名视障用户(多具备科技行业背景),结果显示:

72% 的 AI 生成描述准确

虚拟探索模式获高度评价(用户称其可替代传统信息获取方式)

宙世代

宙世代

ZAKER旗下Web3.0元宇宙平台

一起剪

一起剪

ZAKER旗下免费视频剪辑工具

相关标签

ai it之家 哥伦比亚大学 准确
相关文章
评论
没有更多评论了
取消

登录后才可以发布评论哦

打开小程序可以发布评论哦

12 我来说两句…
打开 ZAKER 参与讨论