开源AI+AR智能眼镜Frame宣布支持Chat GPT-4o
查看引用/信息源请点击:mixed-news
Frame已经支持全新的Chat GPT-4o
(映维网Nweon 2024年05月22日)开源AI+AR智能眼镜Frame现已在全球发售,而新加坡开发团队Brilliant Labs同时启动了名为“开发者合作伙伴计划”的项目。值得一提的是,Frame已经支持全新的Chat GPT-4o。
这款由多模态人工智能助手Noa驱动的轻型AR眼镜产品Frame售价349美元。除了将数字信息叠加到用户视场的AR功能之外,Frame的一大特色是搭载了多模态人工智能助手Noa。
以语音命令为例,你可以通过语音向Noa询问问题,而大约三秒钟后,智能体就会生成并将答案以文本形式投射到镜片。
除了语音命令,Noa同时能够进行视觉处理、图像生成和转译,这要归功于它集成的几个人工智能模型:会话搜索引擎Perplexity AI;Stability AI的文本到图像模型Stable Diffusion;OpenAI最新的文本生成模型Chat GPT-4o;以及语音识别系统Whisper等等。Frame的镜头分辨率为640 x 400,可用于显示视频和照片。
有了所述功能,用户可以完成一系列便捷的日常任务。例如,在线下商场购物的用户可以要求Noa通过Frame查看目光所及的一双鞋子的线上价格,从而进行比较评估。
Frame现在支持额外的大型语言模型,包括Claude 3,Llama 3和Stable Diffusion。这使得开发者能够基于Frame的人工智能助手Noa构建创造性的应用程序。
除了产品发货之外,团队正在通过开发者合作伙伴计划为开发者提供广泛的资源,包括完整的文档、开源代码和硬件原理图。据介绍,Brilliant Labs计划每月举办两次“office hours”对话,并计划在下个月举办黑客马拉松,以鼓励围绕Frame开发开发者生态系统。