风君子博客2月9日消息,AI眼镜开发商Brilliant Labs宣布推出Frame,这是全球首款集成多模态AI助手的眼镜。Frame不仅重新定义了视觉方式,还重新定义了用户与物理世界的交互方式,而它的外观设计与真实眼镜无差别。
此次Brilliant Labs还获得最新一轮融资,其最新著名投资者是AR先驱Niantic CEO。
Brilliant Labs成立于2019年,由前Apple员工Bobak Tavangar与联合创始人Raj Nakarja和Ben Heald共同创立,致力于通过开发生成式AI嵌入式眼镜来重新想象人机交互。自成立以来,Brilliant Labs 至今已吸引了 600 万美元的融资。
Noa:个性化的多模态AI助手
Frame的Noa是一款独一无二的全天候AI助手。 在外观之下,一种保护隐私的知识图谱,会分析用户与AI助手之间的复合交互,使Noa不仅可以提供个性化的用户体验,还可以形成自己的个性。
例如,任务和请求可能包括总结一本书的要点,然后将书中的外语文本翻译成您偏好的语言;将白板会议整理成可共享的文档,与同事分享;识别皮肤问题并推荐现成的药膏;甚至根据一杯咖啡中的营养价值或咖啡因含量建议每日饮用的健康量。
甚至可以充分利用眼镜内置的多模态GenAI功能,这意味着 Frame 可以组织多个 AI 系统一起完成更高级的任务。
宣布与AIGC热门平台 Perplexity 在实时搜索上进行合作
凭借用户可以在与数字世界连接的同时解放双手的特质,Brilliant Labs 首次宣布与 Perplexity 合作,重新思考和定义 AI 增强眼镜时代的传统搜索引擎概念。Perplexity 基于首创的在线 LLMs ,参考最新的网页数据,其AI问答引擎可以即时简洁地回答口头查询,无需受制于同类产品知识滞后的问题。因此,Frame 用户可以随时随地、解放双手地获取来自网络的实时可靠信息。
例如,现在将 Perplexity 添加到 Noa 的多模式功能中,Frame 可以通过简单地眼球转动,将连锁零售店中的一件服装,与亚马逊上的价格进行比较;在看房时,只需瞥一眼房子,就可以在类似贝壳的房产App上搜索其房源;或是需要自己进行家庭维修时,Noa 可以帮助您锁定并交叉参考您完成项目所需的正确螺丝;您甚至可以立即查看路过的每家餐厅的评论,同时还能够交叉参考它是否有最近的负面新闻……可能性是无限的。
“Frame 真正为人类与数字世界、人与彼此之间的互动带来了全新范式。Noa,一种全新的 AI 虚拟助手,让用户能够更多地参与周围的世界,而不是与物理世界隔绝。我们希望 Frame 能够使人们以全新的方式彼此连接,并在日常生活、工作场所、课堂等等方面开启新的体验。这是将GenAI带到人类眼前的独特承诺。”Brilliant Labs CEO兼联合创始人 Bobak Tavangar 表示。
“人类与AI交互的未来将在创新的可穿戴设备和新装置中得以体现,我非常高兴能够将 Perplexity 的实时问答引擎带到 Brilliant Labs 的 Frame中,”Perplexity CEO兼创始人 Aravind Srinivas 表示。
Frame的特性:外观与日常眼镜产品无异
与市场上的其他增强型可穿戴设备不同,Frame不仅仅是戴上一两个小时后就得取下的智能眼镜。 Frame本身就是一副光学眼镜,可以完全取代您每天佩戴的眼镜,只是提供了一个轻量级的个人AI助理。
轻量级AI眼镜 – 使用工程级尼龙塑料制造,Frame经过优化,重量仅为39克,与标准眼镜一样轻,但坚固耐用,适合全天佩戴;
时尚设计 – 呈现经典复古造型,提供烟熏黑、哑光冷灰和一个命名为H2O的透明变体,为日常风格增加了时尚元素;
生动显示 – Frame的高分辨率生动显示屏亮度高达3000尼特;
前置空间摄像头 – Frame集成了一个低功耗机器视觉摄像头,可以精准捕获和解读周围物理世界;
集成麦克风 – 通过语音输入与您的人工智能助手进行控制或交流,实现免提体验;
多模态AI – 通过蓝牙5无线连接到您的手机,支持Perplexity, Stability AI和Whisper等的同时GenAI输入,为现实世界的问题提供高级解决方案;若Frame在中国上市,Noa将按照相关法域支持本地LLMs,包括文心一言;
6DoF IMU – 位于鼻梁中央位置的先进 6 轴 IMU(惯性测量单元)为 Frame 提供了三个加速度轴和三个罗盘轴,可用于菜单导航、计步、方向等功能;
定制处方光学 – 与 AddOptics 合作,可以通过独特的光学镜片铸造工艺将处方镜片精密粘合到 Frame 上。
继续开源模式为开发者提供支持
信守 Brilliant Labs 开源设备的承诺,Frame 将效仿其前身 Monocle。相应地,Brilliant Labs 将提供全面支持,为有意对 Frame 的硬件和软件进行修改或破解的开发人员提供充足的资源,包括实时文档、开源代码库和硬件原理图。此外,开发人员还可以调整 Noa 支持的AI模型参数。