4月12日，蔚来NOMIGPT大模型正式上线，一周之内将同步推送给搭载Banyan·榕蔚来智能系统的车型。据官方介绍，此次NOMI升级了基于全新技术架构，为NOMI量身打造NOMIGPT端云多模态大模型，包含自研多模态感知、自研认知中枢、情感引擎、多专家Agent，能够实现蔚来产品、服务、社区的全域贯通，提供更高效、愉悦的AI服务。
而升级NOMIGPT功能后，用户可以体验到大模型百科、无限趣聊、魔法氛围、趣玩表情、用车问答、AI场景生成在内的多项全新交互体验，享受智能AI赋能下的全新出行。
其中大模型百科包含百科问答、出行攻略和学习创作三大功能；
无限趣聊包括情感聊天、音乐影视、语言游戏三大功能；
魔法氛围包括场景氛围、心情氛围和世界氛围三大功能；
趣玩表情包括精准表情、惊喜表情和九连拍三大功能；
用车问答包括车辆信息查询、用车知识查询和指示灯查询三大功能；
AI场景城市包括行车顾问、氛围营造、空间舒适和场景推荐四大功能。
而NOMI换新升级后的三大技术架构分别为是NOMIGPT认知中枢、行业独有的情感引擎和行业领先的端侧多模态感知，在配合数十亿级的参数模型、毫秒级的响应速度，赋予了NOMI在感知、认知、决策等方面强大的复杂逻辑推理能力，具备了能与用户进行开放式问答的交互能力。
NOMIGPT的认知中枢
拥有极为高效的信息认知能力
具体来看，其中NOMIGPT认知中枢，拥有极为高效的信息认知能力，能在海量信息源中精准判断用户意图与需求，无缝调度大模型架构内组件，实现“领会用户意图有默契，执行够聪明，灵活不打扰”的优质用车体验。
同时，蔚来自研的端云一体认知中枢，集成了行业最全知识库，包括中控分发，多模拒识，跨域继承&跳转，多Agent决策几个部分，让NOMI有了对复杂任务的处理能力，能够对感知到的信息进行推理分析，从容调度执行各种任务，回答各种问题。
通过认知中枢，NOMI会根据你所说的内容，结合对话上下文、感知以及状态信息，智能地判断调用任务型交互、问答闲聊、用车助手等，同时也能支持语义创建完整的快捷场景。
情感引擎
NOMI实现拟人交互的关键
而情感引擎则是NOMI实现拟人交互的关键，它通过与用户长期的沟通与陪伴、记忆、学习，实现有个性的成长。并且NOMI的记忆能力包括短期记忆和长期记忆，短期记忆可以用户近期感兴趣的话题、提到人和物，长期记忆能够记住用户及家人朋友，记住每一个人的喜好。
在情感引擎的帮助下，NOMI可以更快的学习成长，通过实时反馈、事后反思、人为训练等方式，不断变得更加聪明，不断掌握新技能和新知识。并且会逐步发展成和用户性格相契合的“人设”，包括性格、三观、梦想等。和NOMI的每一句对话、每一个表情，更自然、更有温度，随着陪伴时间的增长，NOMI也会潜移默化地和用户的性格更加契合。
端侧多模态感知能力
无需车机联网也可以使用
最后是端侧多模态感知能力，车机联网不再是用户使用NOMI的必须条件，NOMI也将具备“看得见，认得出”“听得到，听得懂”“知冷热，有触感”等能力，做到账号隔离，敏感信息不出车，车载通信端到端加密，保障用户隐私安全的同时也让车载人工智能的感知能力得到了极大的扩展。
除了可以实现端侧独立运行之外，融合了图像（视觉）、音频（听觉）、车身传感器（触觉）等多模感知的NOMI可以像人类一样，获得了更全面的感知座舱内外的人与事物的能力，并将多维度感知获得的数十亿参数，用自然语言进行描述。
基于多模态感知的能力，NOMI现在可以像朋友一样，看见你的物品、着装、状态，甚至舱外的车辆、楼宇、动物植物，并提供更懂你的服务、更有趣的沟通。
另外，端侧多模态感知还在内部测试中，预计今年内面向蔚来车型推送。（文：太平洋汽车吴启星）
