4月12日，蔚來(lái)宣布NOMI GPT正式上線，將陸續(xù)推送給搭載Banyan·榕智能系統(tǒng)的蔚來(lái)車型。

本次更新的重點(diǎn)，是基于全新技術(shù)架構(gòu)為NOMI量身打造的NOMI GPT端云多模態(tài)大模型，它包含自研多模態(tài)感知、自研認(rèn)知中樞、情感引擎、多專家Agent，實(shí)現(xiàn)了蔚來(lái)產(chǎn)品、服務(wù)、社區(qū)的全域貫通，將提供更高效的AI服務(wù)。

升級(jí)NOMI GPT功能后，用戶可以體驗(yàn)到大模型百科、無(wú)限趣聊、魔法氛圍、趣玩表情、用車問(wèn)答、AI場(chǎng)景生成在內(nèi)的多項(xiàng)全新交互體驗(yàn)。

NOMI GPT認(rèn)知中樞、行業(yè)獨(dú)有的情感引擎和行業(yè)領(lǐng)先的端側(cè)多模態(tài)感知是NOMI煥新升級(jí)后的的三大核心技術(shù)架構(gòu)，配合數(shù)十億級(jí)的參數(shù)模型、毫秒級(jí)的響應(yīng)速度，賦予了NOMI在感知、認(rèn)知、決策等方面強(qiáng)大的復(fù)雜邏輯推理能力，具備了能與用戶進(jìn)行開(kāi)放式問(wèn)答的交互能力。

NOMI GPT的認(rèn)知中樞

領(lǐng)會(huì)意圖有默契，執(zhí)行夠聰明、靈活不打擾

NOMI GPT認(rèn)知中樞擁有極為高效的信息認(rèn)知能力，能在海量信息源中精準(zhǔn)判斷用戶意圖與需求，無(wú)縫調(diào)度大模型架構(gòu)內(nèi)組件，實(shí)現(xiàn)“領(lǐng)會(huì)用戶意圖有默契，執(zhí)行夠聰明，靈活不打擾”的優(yōu)質(zhì)用車體驗(yàn)。

蔚來(lái)自研的端云一體認(rèn)知中樞，集成了行業(yè)最全知識(shí)庫(kù)，包括中控分發(fā)，多模拒識(shí)，跨域繼承&跳轉(zhuǎn)， 多Agent決策幾個(gè)部分，讓NOMI有了對(duì)復(fù)雜任務(wù)的處理能力，能夠?qū)Ω兄降男畔⑦M(jìn)行推理分析，從容調(diào)度執(zhí)行各種任務(wù)，回答各種問(wèn)題。通過(guò)認(rèn)知中樞，NOMI會(huì)根據(jù)你所說(shuō)的內(nèi)容，結(jié)合對(duì)話上下文、感知以及狀態(tài)信息，智能地判斷調(diào)用任務(wù)型交互、問(wèn)答閑聊、用車助手等，同時(shí)也能支持語(yǔ)義創(chuàng)建完整的快捷場(chǎng)景。

行業(yè)獨(dú)有的情感引擎

NOMI與你“情投意合”

行業(yè)獨(dú)有的情感引擎是NOMI實(shí)現(xiàn)擬人交互的關(guān)鍵，通過(guò)與用戶長(zhǎng)期的溝通與陪伴、記憶、學(xué)習(xí)，實(shí)現(xiàn)有個(gè)性的成長(zhǎng)，讓NOMI不只是一個(gè)冰冷的“助手”，更是懂你的情感伙伴。

NOMI的記憶能力包括短期記憶和長(zhǎng)期記憶，短期記憶可以用戶近期感興趣的話題、提到人和物，長(zhǎng)期記憶能夠記住用戶及家人朋友，記住每一個(gè)人的喜好。

在情感引擎的幫助下，NOMI可以更快的學(xué)習(xí)成長(zhǎng)，通過(guò)實(shí)時(shí)反饋、事后反思、人為訓(xùn)練等方式，不斷變得更加聰明，不斷掌握新技能和新知識(shí)。

情感引擎也讓每一個(gè)NOMI都能發(fā)展出和用戶性格相契合的“人設(shè)”，包括性格、三觀、夢(mèng)想等，和NOMI的每一句對(duì)話、每一個(gè)表情，更自然、更有溫度，隨著陪伴時(shí)間的增長(zhǎng)，NOMI也會(huì)潛移默化地和用戶的性格更加契合。

端側(cè)多模態(tài)感知

NOMI也可以“看得見(jiàn)、認(rèn)得出”

在行業(yè)領(lǐng)先的端側(cè)多模態(tài)感知能力下，車機(jī)聯(lián)網(wǎng)不再是用戶使用NOMI的必須條件，NOMI也將具備“看得見(jiàn)，認(rèn)得出”“聽(tīng)得到，聽(tīng)得懂”“知冷熱，有觸感”等能力，做到賬號(hào)隔離，敏感信息不出車，車載通信端到端加密，保障用戶隱私安全的同時(shí)也讓車載人工智能的感知能力得到了極大的擴(kuò)展。

除了可以實(shí)現(xiàn)端側(cè)獨(dú)立運(yùn)行之外，融合了圖像（視覺(jué)）、音頻（聽(tīng)覺(jué)）、車身傳感器（觸覺(jué)）等多模感知的NOMI可以像人類一樣，獲得了更全面的感知座艙內(nèi)外的人與事物的能力，并將多維度感知獲得的數(shù)十億參數(shù)，用自然語(yǔ)言進(jìn)行描述。

基于多模態(tài)感知的能力，NOMI現(xiàn)在可以像朋友一樣，看見(jiàn)你的物品、著裝、狀態(tài)，甚至艙外的車輛、樓宇、動(dòng)物植物，并提供更懂你的服務(wù)、更有趣的溝通。端側(cè)多模態(tài)感知內(nèi)部測(cè)試中，預(yù)計(jì)今年內(nèi)面向蔚來(lái)車型推送。

自發(fā)布以來(lái)，NOMI 已經(jīng)歷超過(guò)130次版本迭代、超2000項(xiàng)功能的新增及更新，持續(xù)不斷進(jìn)化，從一個(gè)助手升級(jí)到一位伙伴，或許這就是智能汽車的魅力。