行業|手車互融:意圖標準化助力跨端AI大模型協作
2024年11月18日,智慧車聯開放聯盟(ICCOA)2024年度會員大會在廣州隆重舉行。特別邀請了來自不同領域的杰出代表,以“融合創新 智享出行”為主題,分享他們在智能終端與汽車跨端連接融合的經驗和見解。OPPO智行解決方案負責人兼ICCOA聯盟互融工作組組長張莉帶來了“意圖標準化助力跨端AI大模型協作”,以下內容為現場發言實錄:
尊敬的各位嘉賓,大家好!今天,我非常榮幸站在這里,與大家分享我們對于“意圖標準化助力跨端AI大模型協作”的一些思考和探索。
2024年1月,我作為互融工作組組長,為我們定下了兩個目標:一是探索手車互融場景下圍繞AI大模型的主要需求;二是多連接。今天,我將主要針對第一個目標,與聯盟伙伴們進行交流,并期待在后期展開實際工作合作。
年初,AI大模型發展迅猛,但它在智能終端的形態和功能還不明朗。經過一年的探索,我們對其階段趨勢有了更深入的認識。2024年被稱為AI手機元年,但不僅僅只有手機,許多車企也同時在車輛上落地了AI大模型,如語音助手、閑聊、百科全書、文生圖等功能,為用戶帶來了自然交互的體驗。例如,用戶說“我想看星星”,AI大模型能夠理解用戶的意圖,直接打開車窗,讓用戶享受看星星的樂趣,而不用說“打開天窗”。在這個階段,AI大模型為用戶提供了更直接、更高效的自然交互體驗。
隨著用戶與智能終端的交互從指令轉向意圖,我們認為AI大模型將進入第二階段,即超級助理階段。在這個階段,AI大模型將越來越了解用戶,幫助用戶決策,管理應用系統。無論是手機還是車,都將成為用戶的超級管家,為用戶提供更加智能、便捷的服務。
在智能終端形成超級智能體之后,我們還需要各個應用作為智能體,與終端超級應用組合,共同為用戶提供服務。在第三階段,AI將重構OS,形成超級智能體+多個垂域智能體共同組合的階段,真正實現用戶需求的智能高效完成。
我們發現,隨著大模型在終端的演進,用戶與終端的交互將從以指令為中心轉向以意圖為中心。因此,今天的主題是“意圖標準化驅動”。根據多個權威機構的數據顯示,當前用戶平均擁有約3個設備終端,預計到2030年將接近4個。95后、Z世代等用戶手中擁有手機、平板、電腦等多種智能終端,而汽車也成為了最大的智能體硬件。這些用戶的體驗需求與傳統用戶有很大差異,他們更追求不同屏幕之間的連續化體驗。在AI大模型時代,我們需要多智能終端共同協作,為用戶提供更好的跨端智能化體驗。
為了實現這一目標,我們需要通過意圖標準化,為不同終端的同一用戶在合適的時間、合適的設備上傳遞合適的服務。例如,當用戶說“我想看星星”時,AI大模型需要結合端側數據,解析用戶的真實意圖,并將合適的服務推送到合適的設備上。這需要各個智能終端集合端側數據,共同解析用戶意圖,讓AI大腦更好地判斷用戶最真實的需求,并提供相應的服務。在車上的時候,車打開天窗,不在車內時,手機推送看星星的推薦地點或者星星圖片。
在這種情況下,我們認為意圖標準化需要三大結構:意圖框架、卡片和跨端賬號。意圖框架能夠讓智能終端更好地理解用戶意圖;跨端賬號可以解決不同設備之間的賬戶識別問題,確保用戶信息和數據的有效性;卡片則可以在更多的屏幕上為用戶提供主動和被動的提醒服務及其他內容服務。
跨端意圖是指不同設備之間的用戶意圖交互。例如,“我想看星星”中的“看星星”就是一個意圖,“看”是動作,“星星”是名詞。我們需要解析“星星”的具體含義,以便更好地理解用戶意圖。我們希望車企伙伴、手機廠商伙伴和開發者伙伴能夠共同定義這一套意圖標準,將其入參和出參共同定義好,這樣在AI決策大腦之間進行交互和通訊時,就能得到更準確的指令,避免出現混淆。
卡片是智能設備或智能終端設備的重要特點,它能夠將后臺服務綁定,主動或被動地將用戶所需的服務推送給用戶。例如,當手機上有一張日程卡片時,用戶上車后,這張日程卡片應該能夠自動分享到車機上。同時,我們也要注意控制卡片和應用之間的生命周期關系,確保用戶體驗的一致性。
跨端賬號問題也是實現意圖標準化的關鍵。如果沒有統一賬號,我們就無法識別手機側和車機側的用戶是否為同一人。因此,我們希望在這套系統下,用戶可以直接在手機或車機側授權登錄,授權后手機側和車機側的用戶將被識別為同一人。這樣,我們就能更好地理解用戶需求,為用戶提供更智能化的服務。
在AI大模型時代,算力、數據和算法是三個重要因素。如果有統一的賬號,就能針對同一用戶的收集更多的數據,從而為用戶帶來更智能化的體驗,更準確地理解用戶需求,幫助用戶做出決策。因此,我們希望能夠實現賬號共享,進一步完善這一系統。
我們希望為用戶和開發者帶來便利。對于用戶來說,他們希望獲得更加智能、便捷和隨心的體驗;對于開發者來說,他們希望能夠精確觸達用戶,提高開發效率。通過手機和車的統一標準,開發者可以一次開發,多端部署,節省開發成本。
這里,我想分享一個案例。基于這套框架,語音互融是可以實現的,而且能夠更好地基于用戶意圖執行指令。我們將在現有的ICCOA Carlink協議基礎上進行迭代和升級,避免出現不兼容的情況。我們希望在下一次聯盟大會上,已經有一些伙伴開始執行基于意圖標準化的語音互融新方案。
最后,我想強調一下周期計劃。沒有計劃的標準化是毫無意義的,我們之前與 vivo、小米的伙伴一起商討,希望在2025年完成意圖標準化工作,并落地一部分產品。需要強調的是,意圖標準化不僅支撐語音互融,還將對未來各個智能體的打通起到重要的助力作用。
我們非常希望手機廠商、車企和應用伙伴能夠共同參與意圖標準的建立和產品的落地。我們后續還將組織幾場與車企的研討會,期待車企伙伴的積極參與,共同將意圖標準化落地,為用戶在AI大模型時代提供更好的智能、高效、簡潔的體驗而努力。謝謝大家!
- 免責聲明
- 本文所包含的觀點僅代表作者個人看法,不代表新火種的觀點。在新火種上獲取的所有信息均不應被視為投資建議。新火種對本文可能提及或鏈接的任何項目不表示認可。 交易和投資涉及高風險,讀者在采取與本文內容相關的任何行動之前,請務必進行充分的盡職調查。最終的決策應該基于您自己的獨立判斷。新火種不對因依賴本文觀點而產生的任何金錢損失負任何責任。