新闻7月8日，苹果和哥伦比亚大学研究团队开发了一种名为ScoresCout的原型系统，该系统从视图到街道到盲目和低视力群体（BLV）提供导航支持。该系统将Apple Maps API与领先的多模式模型（基于GPT-4O核）结合在一起，以生成个性化的环境描述。他意识到相关文章已在预印arxiv平台上发表（同伴未审查）。中心特征：路线的预览：预测行程的道路条件：人行道质量，交叉路口，公共汽车站的质量的虚拟探索：开放场景响应：根据用户的需求提供方向指导（例如“公园附近的安静住宅区”）。该系统可以从透视行人的角度来解释可见的内容，以及与屏幕读取兼容的输出结构（短/中/长度）的文本ftware。报告说，在测试阶段，ScoresCout招募了10名视觉残障用户（主要是技术行业的基金）。结果表明，AI的发电和描述中有72％是通过精确的虚拟探索模式赞扬的（用户说他们可以取代传统的信息采集方法）。