4月12日,蔚來宣布NOMI GPT正式上線,將陸續推送給搭載Banyan·榕智能系統的蔚來車型。
本次更新的重點,是基于全新技術架構為NOMI量身打造的NOMI GPT端云多模態大模型,它包含自研多模態感知、自研認知中樞、情感引擎、多專家Agent,實現了蔚來產品、服務、社區的全域貫通,將提供更高效的AI服務。
升級NOMI GPT功能后,用戶可以體驗到大模型百科、無限趣聊、魔法氛圍、趣玩表情、用車問答、AI場景生成在內的多項全新交互體驗。
NOMI GPT認知中樞、行業獨有的情感引擎和行業領先的端側多模態感知是NOMI煥新升級后的的三大核心技術架構,配合數十億級的參數模型、毫秒級的響應速度,賦予了NOMI在感知、認知、決策等方面強大的復雜邏輯推理能力,具備了能與用戶進行開放式問答的交互能力。
NOMI GPT的認知中樞
領會意圖有默契,執行夠聰明、靈活不打擾
NOMI GPT認知中樞擁有極為高效的信息認知能力,能在海量信息源中精準判斷用戶意圖與需求,無縫調度大模型架構內組件,實現“領會用戶意圖有默契,執行夠聰明,靈活不打擾”的優質用車體驗。
蔚來自研的端云一體認知中樞,集成了行業最全知識庫,包括中控分發,多模拒識,跨域繼承&跳轉, 多Agent決策幾個部分,讓NOMI有了對復雜任務的處理能力,能夠對感知到的信息進行推理分析,從容調度執行各種任務,回答各種問題。通過認知中樞,NOMI會根據你所說的內容,結合對話上下文、感知以及狀態信息,智能地判斷調用任務型交互、問答閑聊、用車助手等,同時也能支持語義創建完整的快捷場景。
行業獨有的情感引擎
NOMI與你“情投意合”
行業獨有的情感引擎是NOMI實現擬人交互的關鍵,通過與用戶長期的溝通與陪伴、記憶、學習,實現有個性的成長,讓NOMI不只是一個冰冷的“助手”,更是懂你的情感伙伴。
NOMI的記憶能力包括短期記憶和長期記憶,短期記憶可以用戶近期感興趣的話題、提到人和物,長期記憶能夠記住用戶及家人朋友,記住每一個人的喜好。
在情感引擎的幫助下,NOMI可以更快的學習成長,通過實時反饋、事后反思、人為訓練等方式,不斷變得更加聰明,不斷掌握新技能和新知識。
情感引擎也讓每一個NOMI都能發展出和用戶性格相契合的“人設”,包括性格、三觀、夢想等,和NOMI的每一句對話、每一個表情,更自然、更有溫度,隨著陪伴時間的增長,NOMI也會潛移默化地和用戶的性格更加契合。
端側多模態感知
NOMI也可以“看得見、認得出”
在行業領先的端側多模態感知能力下,車機聯網不再是用戶使用NOMI的必須條件,NOMI也將具備“看得見,認得出”“聽得到,聽得懂”“知冷熱,有觸感”等能力,做到賬號隔離,敏感信息不出車,車載通信端到端加密,保障用戶隱私安全的同時也讓車載人工智能的感知能力得到了極大的擴展。
除了可以實現端側獨立運行之外,融合了圖像(視覺)、音頻(聽覺)、車身傳感器(觸覺)等多模感知的NOMI可以像人類一樣,獲得了更全面的感知座艙內外的人與事物的能力,并將多維度感知獲得的數十億參數,用自然語言進行描述。
基于多模態感知的能力,NOMI現在可以像朋友一樣,看見你的物品、著裝、狀態,甚至艙外的車輛、樓宇、動物植物,并提供更懂你的服務、更有趣的溝通。端側多模態感知內部測試中,預計今年內面向蔚來車型推送。
自發布以來,NOMI 已經歷超過130次版本迭代、超2000項功能的新增及更新,持續不斷進化,從一個助手升級到一位伙伴,或許這就是智能汽車的魅力。

24.98萬!新款智界S7上市!入門705km續航,其他款降2萬…小米SU7都不香了?
2024-04-11
豐田與華為達成合作!一向守成的合資車,為何也搶灘中國智駕?
2024-04-11