Be My Eyes 使用 OpenAI 新 GPT-4 语言模型来改善视觉辅助功能

3月15日消息:自2012年以来，Be My Eyes一直在为超过2.5亿的盲人或低视力者群体创建技术。这家丹麦初创公司将盲人或低视力者与志愿者联系起来，帮助他们完成数百项日常生活任务，如识别产品或导航到机场。

图片来自Be My Eyes

有了GPT-4的新视觉输入能力，Be My Eyes开始在Be My Eyes应用程序中开发由GPT-4驱动的虚拟志愿者™（Virtual Volunteer™），可以产生与人类志愿者相同水平的上下文和理解能力。

Be My Eyes的首席执行官Michael Buckley说：「在我们获得访问权限的短时间内，我们看到了任何图像转文本物体识别工具所无法比拟的性能，这对全球可访问性的影响是深远的。在不远的将来，盲人和低视力群体将利用这些工具，不仅满足大量的视觉解读需求，而且在生活中有更大程度的独立性。"」

当某人发来的图像，比如说，他们冰箱里的东西，GPT-4技术不仅能识别和命名里面的东西，还能推断和分析你能用这些成分做什么。然后你可以向它索取一份好的食谱。这样的使用场景案例几乎是无限制的。Buckley表示：「这对人类来说是一个极好发展机遇，但同时也代表着巨大商业机会。」

据介绍，Be My Eyes由GPT-4技术驱动的新功能目前处于封闭测试阶段，正在接受一小部分用户的反馈测试。并且将在接下来的几周内扩大 Beta 测试人员群体。就像其现有的志愿者服务一样，该工具对所有使用 Be My Eyes 应用程序的盲人和低视力社区成员免费。