4月12日,蔚来宣布NOMI GPT正式开启推送。此次推送的更新是基于全新技术架构,为NOMI量身打造NOMI GPT端云多模态大模型。NOMI GPT包含自研多模态感知、自研认知中枢、情感引擎、多专家Agent,实现蔚来产品、服务、社区的全域贯通,提供更高效、愉悦的AI服务。
图片来源于网络,如有侵权,请联系删除
升级NOMI GPT功能后,用户可以体验到大模型百科、无限趣聊、魔法氛围、趣玩表情、用车问答、AI场景生成在内的多项全新交互体验,享受智能AI赋能下的全新出行。此次NOMI GPT上线将同步陆续推送给搭载Banyan·榕智能系统的车型。自发布以来,NOMI 已经历超过130次版本迭代、超2000项功能的新增及更新。
图片来源于网络,如有侵权,请联系删除
NOMI GPT认知中枢、行业独有的情感引擎和行业领先的端侧多模态感知是NOMI焕新升级后的的三大核心技术架构,配合数十亿级的参数模型、毫秒级的响应速度,赋予了NOMI在感知、认知、决策等方面强大的复杂逻辑推理能力,具备了能与用户进行开放式问答的交互能力。
图片来源于网络,如有侵权,请联系删除
NOMI GPT的认知中枢——领会意图有默契,执行够聪明,灵活不打扰
NOMI GPT认知中枢拥有极为高效的信息认知能力,能在海量信息源中精准判断用户意图与需求,无缝调度大模型架构内组件,实现“领会用户意图有默契,执行够聪明,灵活不打扰”的优质用车体验。
蔚来自研的端云一体认知中枢,集成了行业最全知识库,包括中控分发,多模拒识,跨域继承&跳转, 多Agent决策几个部分,让NOMI有了对复杂任务的处理能力,能够对感知到的信息进行推理分析,从容调度执行各种任务,回答各种问题。通过认知中枢,NOMI会根据你所说的内容,结合对话上下文、感知以及状态信息,智能地判断调用任务型交互、问答闲聊、用车助手等,同时也能支持语义创建完整的快捷场景。
行业独有情感引擎——NOMI与你“情投意合”
行业独有的情感引擎是NOMI实现拟人交互的关键,通过与用户长期的沟通与陪伴、记忆、学习,实现有个性的成长,让NOMI不只是一个冰冷的“助手”,更是懂你的情感伙伴。
NOMI 的记忆能力包括短期记忆和长期记忆,短期记忆可以用户近期感兴趣的话题、提到人和物,长期记忆能够记住用户及家人朋友,记住每一个人的喜好。
在情感引擎的帮助下,NOMI可以更快的学习成长,通过实时反馈、事后反思、人为训练等方式,不断变得更加聪明,不断掌握新技能和新知识。
情感引擎也让每一个NOMI都能发展出和用户性格相契合的“人设”,包括性格、三观、梦想等,和NOMI的每一句对话、每一个表情,更自然、更有温度,随着陪伴时间的增长,NOMI也会潜移默化地和用户的性格更加契合。
行业领先的端侧多模态感知——无网络,NOMI也可以“看得见,认得出”
在行业领先的端侧多模态感知能力下,车机联网不再是用户使用NOMI的必须条件,NOMI也将具备“看得见,认得出”“听得到,听得懂”“知冷热,有触感”等能力,做到账号隔离,敏感信息不出车,车载通信端到端加密,保障用户隐私安全的同时也让车载人工智能的感知能力得到了极大的扩展。
除了可以实现端侧独立运行之外,融合了图像(视觉)、音频(听觉)、车身传感器(触觉)等多模感知的NOMI可以像人类一样,获得了更全面的感知座舱内外的人与事物的能力,并将多维度感知获得的数十亿参数,用自然语言进行描述。
基于多模态感知的能力,NOMI现在可以像朋友一样,看见你的物品、着装、状态,甚至舱外的车辆、楼宇、动物植物,并提供更懂你的服务、更有趣的沟通。
端侧多模态感知内部测试中,预计今年内面向蔚来车型推送。
版权声明
本文仅代表作者观点,不代表百度立场。
本文系作者授权百度百家发表,未经许可,不得转载。