mojang开源「ambientGPT：开源多模态MacOS基础模型操作界面 可调用GPT-4o API」

划重点:

⭐ AmbientGPT 可以运行 GPT-4和本地基础模型，并直接了解屏幕环境，使基础模型不再局限于浏览器。

⭐ 使用 AmbientGPT，屏幕上下文将直接作为查询的一部分进行推断，无需再次显式上传上下文。

⭐ 若要运行本地模型，需要使用 ARM64MacBook，并使用兼容的 OpenAI API 密钥。

5月23日 消息:最近，一款名为 ambientGPT 的开源项目备受关注。这款工具是一款多模态 MacOS 基础模型操作界面，可以调用 GPT-4o API 或者本地开源模型进行问答，并能直接访问屏幕内容而不需要截图。它的本地模型是基于 Apple 的 MLX 库，技术栈包括 Python + Node。

AmbientGPT 是一项具有创新意义的技术，它可以运行 GPT-4和本地基础模型，并且能够全面了解屏幕环境。这一技术的出现，突破了基础模型一直局限于浏览器的限制。通过使用 AmbientGPT，用户的屏幕上下文将直接作为查询的一部分进行推断，从而避免了再次上传上下文的麻烦。

在使用 AmbientGPT 时，用户需要具备 ARM64（M1、M2、M3等）MacBook，并且需要使用兼容的 OpenAI API 密钥，以便能够使用 GPT-4o。同时，为了运行本地模型，还需要安装必要的软件包。

AmbientGPT 的出现为用户提供了更便利、更高效的使用体验，使得 GPT-4和本地基础模型能够更好地融入用户的实际屏幕环境中，从而实现更加智能化的应用和操作。该技术的推出，预示着未来在智能模型应用领域将会迎来更多创新和便利。

产品入口:https://top.aibase.com/tool/ambientgpt