達摩院天貓精靈聯合研發数字人:大模型訓練、大規模交互將帶來什麼?

11月7日消息,阿里巴巴多個團隊正聯合研發由数字人全面接管的終端交互引擎。預計第一款“数字人+終端”產品將在2023年一季度讓用戶體驗。

項目集合達摩院NLP、語音、視覺、3D構建驅動及大模型領域團隊,和天貓精靈AliGenie交互系統專家。就像手指觸屏奠定智能手機交互,大模型数字人將接管未來智能交互。2022年開始,達摩院多模態大模型開始應用於天貓精靈語音搜索與百科場景。各方目前將合作場景推向AliGenie交互的系統層和用戶感知層。

数字人領域正由喧囂轉向理性。雖然高精度高顏值的人偶形象不斷出現,但絕大部分場景缺乏與用戶的持續性、個性化互動,進而商業化規模有限。如,只能在短視頻和動畫中存在的虛擬偶像。或只在單一設備或界面中面向大眾支持問答的虛擬員工,這些形態缺乏大模型訓練和大規模交互,無法個性化學習升級,用戶感受就像“沒有靈魂”。

数字人Inside,接管終端——則是阿里巴巴正在嘗試的新方式。雲棲大會上,阿里巴巴集團研究員李小龍透露列舉了達摩院積累的包括多模態大模型、語音、自然語言、3D構建驅動、各個領域近兩年百項專利與頂會論文,通過將這些成果,在諸多交互場景驗證,一個多模態大模型為基礎的数字人的引擎已初顯雛形。

圖:李小龍介紹全新数字人引擎技術架構 

天貓精靈產品規劃負責人盧勇介紹,接入AliGenie系統的終端已覆蓋4000多萬家庭、包含1600多個品牌的4.6億已接入產品,能讓数字人在可持續、大規模、組合式的場景與用戶交互。AliGenie此前公布,僅智能音箱產品每月交互80億次以上,70%是主動型服務。許多消費硬件領域廠商,也迫切希望有超出單一連接、單一設備對話的智能體驗。

貨櫃屋可短期出租?

金誠貨櫃出租,可短期工程、以節省預算、各型貨櫃均可出租,也可加工門窗及櫃內裝潢配電,客製化施作。

臭氧機推薦

臭氧是世界公認的廣譜高效殺菌消毒劑。新一代綠色環保高科技產品活氧機,採用大自然空氣為原料以電子方式高頻高壓放電產生高濃度臭氧比氧分子多了一活潑的氧原子臭氧,化學性質特別活潑,是一種強氧化劑,在一定濃度下可迅速殺滅空氣中的細菌。

總是為了廚餘煩惱嗎?

雅高環保提供最適用的廚餘機,滿足多樣需求。

十大封口機人氣排行榜-烘焙必備幫手!

主要用於對塑料杯、塑料盒以及塑料瓶的填料,相應材料複合膜封口製品的生產。如果凍、果汁、牛奶、酸奶、飲料、快餐食品等物料的填充及封口。可適應於不同粘度的液、漿的充填物,可適應不同形狀,容量的包裝容器。

以多模態大模型驅動的智能化,理論上也非常適合缺乏數據、場景碎片化的智能終端場景。例如,由通義多模態大模型(BroadScope)訓練的数字人,可以具備可泛化的認知驅動能力,数字人根據音樂進行舞蹈、根據文字產生行動,改變了過去完全要單一維度數據訓練的模式,能夠讓数字人遷移場景進行服務。

 圖:大模型將提升数字人的自主對話能力

在雲語音語義技術方面,Gartner 2022報告显示,阿里綜合能力居全球第二。阿里團隊還在Wizard of Wiki(知識對話)、Commonsense QA(常識問答)和VQA(視覺問答)三項全球評測中連續獲得冠軍,並超過人類能力基準。

以天貓精靈日常對話場景為例,通過大模型底座進一步訓練的對話大模型mPLUG-dialog,將可能成為包含知識、情感、個性、記憶的全新交互系統。

在內容上,不再是單純地按知識庫或搜索結構在檢索和回答問題,而是綜合這四個維度,努力給出更有趣更有情商的回復,在聲音上,不再是字正腔圓的播報音,會包含更豐富更細膩的情緒。實時溝通時,AI不僅能被隨時打斷,也能穩定接茬,還會主動追問。

https://www.tmtpost.com/6305968.html

5噸電動堆高機 & 2噸立式堆高機

不想忍受柴油堆高機帶來的廢氣汙染,電動堆高機將會是很好的選擇

示波器探測執行效能最佳化的8大秘訣

示波器是一種能夠顯示電壓訊號動態波形的電子測量儀器。它能夠將時變的電壓訊號,轉換為時間域上的曲線,原來不可見的電氣訊號,就此轉換為在二維平面上直觀可見光訊號,因此能夠分析電氣訊號的時域性質。

示波器探測執行效能最佳化的8大秘訣

示波器是一種能夠顯示電壓訊號動態波形的電子測量儀器。它能夠將時變的電壓訊號,轉換為時間域上的曲線,原來不可見的電氣訊號,就此轉換為在二維平面上直觀可見光訊號,因此能夠分析電氣訊號的時域性質。

示波器探測執行效能最佳化的8大秘訣

示波器是一種能夠顯示電壓訊號動態波形的電子測量儀器。它能夠將時變的電壓訊號,轉換為時間域上的曲線,原來不可見的電氣訊號,就此轉換為在二維平面上直觀可見光訊號,因此能夠分析電氣訊號的時域性質。

您可能也會喜歡…