AI大模型賦能,智慧出行再升級
2024年11月18日,智慧車聯開放聯盟(ICCOA)2024年度會員大會在廣州隆重舉行。特別邀請了來自不同領域的杰出代表,以“融合創新 智享出行”為主題,分享他們在智能終端與汽車跨端連接融合的經驗和見解。vivo戰略發展經理兼ICCOA車聯工作組組長王亞忠帶來了“AI大模型賦能,智慧出行再升級”的介紹,以下內容為現場發言實錄:
大家好,我是vivo王亞忠,非常高興和大家再一次相聚。剛才云昇總結了聯盟的工作成果,車聯已經具備一定規模,車鑰匙標準也成功落地,作為從聯盟成立之初就開始參與車聯和車鑰匙標準工作的我,對此深感振奮。相信隨著聯盟持續發展壯大,只要我們成員之間繼續緊密協作,堅持開放合作、資源共享、技術創新,未來聯盟的成果必將更加豐碩。
今天我匯報分享的題目是《AI大模型賦能,智慧出行再升級》,我將介紹在手車進一步互融和AI大模型強大賦能行業發展的背景下,vivo智能車載升級的新功能、新能力、新特性,這些新能力不僅強化了用戶體驗,更帶來了1+1大于2的手車生態互補與深度互融的出行體驗升級。
首先介紹一下今年10月份在vivo開發者大會上發布的vivo智能車載5.0。vivo智能車載5.0累計支持170+汽車品牌,8500+車型,規模行業領先。我們還借助vivo手機的操作系統、藍心大模型、藍心智能體等能力,持續優化用戶體驗,并將用戶在手機端享有的豐富AI功能與手機生態無縫融入vivo智能車載,帶來4大體驗升級和4大生態互補的AI功能,即使是傳統燃油車,或者是較早面世、算力相對有限的新能源車型接入vivo智能車載后,用戶體驗和生態豐富程度也能媲美具備高算力、高投入打造的最新款新能源車。
體驗升級特別值得一提的是性能,在手車互聯產品功能日益同質化的背景下,操作是否流暢就是用戶體驗非常關鍵的指標,vivo智能車載5.0移植了vivo手機操作系統Qrigin OS核心能力之一的不公平調度能力,實現了應用啟動速度的飛躍式提升。尤其是用戶出行場景Top2應用:地圖和音樂。
除了性能升級,新推出的4大AI功能可以直接調用車機本身不具備、無法單獨獲取到的資源,比如手機的數據、應用、生態等,真正做到手車資源互通,生態互補,為出行用戶共同打造一個完整、連貫且高度智能化的產品體驗,確保用戶從手機到車機,都能享受到無縫銜接的便捷與智慧。
第1個AI功能是“小V建議”,小V建議會根據用戶的日常使用習慣、日程安排,為用戶動態推薦當前最適合的服務,如出門上班時,坐進車里就能看到去公司的最優通勤路況;有待取的快遞,快到家時會及時提示你收取。小V建議背后基于vivo AI意圖框架,主動感知,隨車提醒,重要信息適時顯示,更懂你、更好用。
第2個AI功能是“車載小V幫記”,當我們開車時,手機上有重要來電,可以在電話的全屏頁面或電話浮窗上,通過小V幫記進行實時的語音轉文字記錄內容,你專心開車,我專心記錄。通話結束后,記錄的內容會保存到手機原子筆記上,并提供內容摘要總結、待辦等,不遺漏每一個關鍵信息。
第3個AI功能是“原子島地址傳送”,vivo&特斯拉行業首發原子島地址傳送功能,支持特斯拉全系車型,當我們在出發前,別人手機上發過來的微信地址、大眾點評要去的餐廳,在手機上簡單的拖拽或長按復制,提前通過原子島發送給車機。人到車里后,直接一鍵確認導航。用戶無需上車連接車機后再輸入地址導航,人未上車,地址已到。
第4個AI功能是“車載藍心小V”,全面接入藍心大模型,我們訓練了車載場景垂類大模型,打造了出行百科,讓你開車時專注方向盤,無需用手機查詢百科。并且重點覆蓋導航、音樂等場景,提升口語化、多輪對話、可見即可說等能力,帶來更自然泛化語音操控智能車載的體驗,有效提升用戶的操作效率和連貫性。以上介紹的4大AI功能會跟隨最新的OriginOS 5陸續推送給用戶,這些創新的AI功能背后是基于vivo全面開放的能力。vivo希望與合作伙伴一起,通過開放手機的系統、數據、生態、AI等能力,在智能融合、數據融合、桌面融合、硬件融合等層面為用戶帶來更多手車互聯互融創新的產品。下面我會重點介紹幾個開放能力,以及基于這些開放能力與大眾等合作伙伴共創的一些案例。
跨端藍心大模型BlueLMKit,是vivo智能車載的一個全新的開放能力, BlueLMKit提供跨端藍心大模型API級能力調用,車機集成后,可以在車機上實現問答、創圖、藍心小V卡片上車,以及智能體調用等AI能力。
這里重點介紹下“藍心小V卡片上車”功能。BlueLMKit提供更為便捷的大模型能力接入方式,支持藍心小V以卡片形式上車,車端可以自定義卡片顯示位置和效果,點擊可以放大成小窗或全屏方式。上車后可以實現手機和車機的生態互補與深度互融,比如喚醒車機語音助手,直接可以跨端調用手機語音原子化能力,如控制手機導航軟件、音樂播放,控制手機微信給人發信息等。目前vivo支持100+意圖垂類能力開放,我們可以對車機說“打開臥室空調”來控制家居設備,也可以說“播放一首周杰倫的歌”,“定個17:00鬧鐘”,真正的做到了“喚醒車機,直控手機”。
此外,基于BlueLMKit,我們還向車機提供手機側智能體的調用能力,比如車載智能體、家居智能體,還有豐富的行業智能體。前面剛剛介紹的車載藍心小V就是車載智能體的具體能力體現,除了系統的本機能力支撐,還可以接入豐富的三方能力。像百度地圖的地圖智能體、大眾點評的生活服務、以及各類商旅服務,都可以提供各個垂類的專業能力。
調用家居智能體可以在車上便捷控制vivo豐富的IoT生態,我們訓練了空調、照明、插座等6個品類成千上萬條操作指令生成了IoT垂類大模型,用戶可以用更口語化的表達更自然泛化的語音操控輕松實現IoT設備控制,目前已經支持4000+的SKU。
服務接力RelayKit從1.0通過近場通信實現應用間導航、音視頻服務流轉,到2.0實現跨應用的地址流轉、應用接續,今年RealyKit3.0迭代了車企APP云端服務接力的能力,做到了跨空間的手車數據融合。前面也展示了vivo和特斯拉的合作案例,通過云端接力實現手機車機間的導航流轉功能。我們不用在車機旁,任何時間任何地點都可以把要導航的地址通過原子島發送給車機,上車后即刻開啟導航。
桌面融合FusionKit3.0在桌面列表融合、固定小窗基礎上增加了小窗靈動布局、跨窗口超級拖拽能力。手機的窗口可以以懸浮小窗、分屏、全屏、橫屏小窗等模式顯示在車端,多個窗口也可以隨心靈活組合。小窗只是一種基本的形態,這個形態在5年前手機給PC和Pad投屏就已經具備,在車機上,我們并不只聚焦和滿足于把小窗這個形態做出來,而是思考小窗以及未來的鏡像形態能夠給用戶車內帶來什么體驗提升。
比如在兩個屏幕區域之間,拖拽是最符合用戶直覺的交互方式。FusionKit3.0同時實現了跨窗口的數據融合。手機和車機窗口內的內容,包括文本、圖片、地址、文件都可以實現超級拖拽功能。我們可以把車機相冊里的照片直接拖到手機微信,發送給朋友。也可以把大眾點評里的地址拖動到車機地圖,在車機直接發起導航。
FusionKit3.0還支持地址的智能提取。可以從一段文字或圖片中智能提取地址信息。不管像這種微信里的地址卡片,還是長文本,都可以做到長按快速地址提取。不用打開手機,在車機上就可以做到地址拖動流轉,真正的做到了超級便捷。
以上就是vivo智能車載相關的介紹,聯盟成立以來,vivo積極和聯盟成員一起基于ICCOA Carlink協議把傳統投屏、桌面融合、窗口融合、文件互傳等技術能力標準化落地,已經覆蓋了500萬輛車以及6億+臺手機,形成了真正意義上的行業標準。未來,vivo會繼續開放手機側系統、AI等基礎能力,開放跨端藍心大模型BlueLMKit、桌面融合FusionKit等技術能力,與聯盟伙伴一同積極探索手車互聯互融創新技術落地,并把相應技術能力貢獻到ICCOA聯盟,推動ICCOA Carlink協議進一步產業標準化智能化繁榮發展,持續賦能車聯網行業,為用戶提供完整、連貫且高度智能化的生態互補與深度互融的出行體驗。
- 免責聲明
- 本文所包含的觀點僅代表作者個人看法,不代表新火種的觀點。在新火種上獲取的所有信息均不應被視為投資建議。新火種對本文可能提及或鏈接的任何項目不表示認可。 交易和投資涉及高風險,讀者在采取與本文內容相關的任何行動之前,請務必進行充分的盡職調查。最終的決策應該基于您自己的獨立判斷。新火種不對因依賴本文觀點而產生的任何金錢損失負任何責任。