新火種
2024-11-16 
重磅發布:「TeleTrip-星辰文旅」亮相數字人大會,大熊貓“蘇琳”引圍觀
今日，首屆中國數字人大會在北京拉開帷幕，一只以四川省阿壩州大熊貓“蘇琳”為原型的 3D 數字熊貓吸引了大量圍觀和駐足。數字熊貓“蘇琳”身著帶有藏、羌族元素的特色服裝，在現場親切自然地與觀眾進行語音互動，介紹并講解阿壩州本地的景區特色和風土人情，還時不時地跳起舞來。
這是由中國電信四川公司與中國電信人工智能研究院（TeleAI）共同建立的人工智能聯合實驗室最新推出的落地項目之一，是基于首次面向文旅產業推出的創新產品“TeleTrip -星辰文旅”，以四川省阿壩州為試點打造的3D數字熊貓智能一體機。TeleTrip 以大語言模型為基礎賦能文旅場景，集結了包括 3D 數字人、實時渲染與重建、多模態 AI 智能體（Agent）等多項前沿技術。
此工作由中國電信集團 CTO、首席科學家、中國電信人工智能研究院（TeleAI）院長李學龍教授帶領，由 TeleAI 的多媒體認知學習實驗室（EVOL）和渲染與三維重建團隊（CTEngine）協同完成，旨在通過端云協同實現智能化和沉浸式的大模型應用體驗，開拓智慧文旅超級應用，推動文旅產業的創新發展，引領新風向。
據悉，多媒體認知學習實驗室(EVOL)主任為中國電信人工智能研究院(TeleAI)資深研究科學家趙健，兼任西北工業大學光電與智能研究院研究員、博士生導師，清華大學自動化系、復旦大學/浙江大學/中國科學技術大學計算機系博士生企業導師，博士畢業于新加坡國立大學。研究領域：多模態AI Agent、AI+文旅、臨地安防。 發表CCF-A類論文60余篇，一作代表作包括2篇T-PAMI（IF: 20.8）、3篇IJCV （IF: 11.6）等，第一發明人授權國家發明專利5項。技術成果服務于多個國家重要部門、發揮了重要作用，同時也在中國電信、百度、螞蟻金服等7個科技領軍企業得到應用，產生了顯著效益。入選了中國科協、北京市科協“青年人才托舉工程”，主持JKW某特區項目、國自然面上/青年科學基金等項目7項。曾獲吳文俊人工智能優秀青年獎(2023)、吳文俊人工智能自然科學獎一等獎(2/5, 2022)、ACM MM唯一最佳學生論文獎(一作, 1/208, CCF-A, 2018)，8次在國際重要科技賽事中奪冠。 擔任北京圖象圖形學學會理事，國際知名期刊《Pattern Recognition》、《IET Computer Vision》編委，《Pattern Recognition Letters》、《Electronics》特刊客座編輯，VALSE資深領域主席，ACM Multimedia 2021分論壇主席，CICAI 2022/2023領域主席，CCBR 2024論壇主席，中國人工智能學會/中國圖象圖形學學會高級會員，“挑戰杯”大學生科技作品競賽、中國人工智能大賽、中國電信集團科技獎評審專家等。
3A級高精度生物還原，讓每一根毛發自然逼真數字形象構建是數字人應用的基礎。無論人物或動物，對其外形、皮膚、毛發，以及體態和動作的還原，將決定用戶感受的第一印象。
在數字版“蘇琳”的形象構建上，TeleTrip 團隊根據 1936 年出生于阿壩汶川，國際大熊貓譜系編號 001 的大熊貓“蘇琳”為原型，經過查閱對照歷史照片和影像數據，并通過超越 3A 級別的高精度生物體三維重建與實時渲染技術，進行復雜的幾何細節處理，針對超過百萬根毛發實時渲染，使其無論在靜止還是運動中都能展現逼真的質感。
TeleTrip數字熊貓“蘇琳”形象
此外，依據大熊貓的生理構造，TeleTrip 團隊還通過創新的智能骨骼綁定技術，精確模擬其在運動中的骨骼與肌肉變化，實現動作和姿態的高度仿真，讓數字熊貓“蘇琳”在與用戶交互時自然、順暢，展現出無與倫比的真實感和生命力。
大模型加持多語言交互，“大熊貓”也有智慧大腦數字熊貓“蘇琳”不僅擁有自然、逼真的外表，還“上通天文，下知地理”，能夠通過識別多種方言，為觀眾介紹和講解阿壩州特有的文化知識和旅游資源。
這正得益于 TeleTrip 大模型強大的自然語言處理和多模態理解能力，實現語音和圖文等多種輸入方式協同交互，確保全面、深度理解用戶需求。同時，TeleTrip 還整合了阿壩州豐富的歷史、文化和旅游知識庫，構成數字熊貓“蘇琳”的智慧大腦，讓它成為知識淵博的智能導游。
針對實時分析難、交互不流暢、真實感實時渲染難等關鍵挑戰，TeleTrip 團隊通過先進的數據存儲策略和智能路由查詢引擎，大幅提升了檢索效率，并有效降低推理成本。同時，訂制化的超多毛發逼真實時渲染技術保證了“蘇琳”逼真萌萌的外態；本地化部署還確保高準確率和毫秒級響應速度，即使在沒有網絡的情況下，仍能提供優質的服務。
多模態多智能體協同，面向未來的智慧文旅超級應用面向未來，TeleTrip團隊將繼續專注技術創新，引入自研的多模態多智能體協同技術，讓數字熊貓“蘇琳”不僅可以為游客介紹景區，還能提供個性化行程規劃、訂票訂酒店、餐飲穿搭推薦、購物等全方位的超級應用體驗。
AI Agent 具備獨立思考、調用工具等核心能力，可以通過與環境進行交互從而感知信息并做出相應的思考和行動。它能夠結合大語言模型的通用能力，根據用戶的指令和需求，將任務拆解并逐個完成，彌補大模型行動的“不足”，實現更復雜的任務。
未來，結合 AI Agent 的強大能力，數字熊貓“蘇琳”可以基于用戶意圖和偏好自動安排旅行計劃，并根據行程預定航班、酒店和餐廳。同時，它還能靈活應對可能發生的各種突發情況，并通過調取工具，一一解決。
此外，結合多模態智能交互和多輪對話技術，AI Agent 還能為用戶提供旅行中的實時支持，如導航、本地信息查詢和語言翻譯等。結合虛擬現實（VR）和增強現實（AR）技術，AI Agent 還將打造沉浸式的交互體驗，為用戶提供虛擬導覽和伴游，豐富每段旅程。
打造標桿項目，引領智慧文旅新風向本次大會是數字熊貓“蘇琳”的首次公開亮相，它將于10月在四川省阿壩州與廣大游客正式見面。屆時，每位用戶都可以在指定景點通過語音、觸控等方式與數字“蘇琳”面對面交流和互動。
3D數字熊貓智能一體機
不僅如此，TeleTrip 還將利用端云協同渲染與三維重建技術構建一個虛擬與現實相結合的野生棲息地。游客通過手機掃描實景，就可以與數字熊貓“蘇琳”互動，跟隨它的腳步探索阿壩州的美麗景色，并享受包括餐飲、交通、住宿、娛樂等多種個性化的旅游導覽服務。
自疫情結束以來，文旅市場迎來了新一輪的增長和爆發。文化和旅游部積極響應國家科技創新戰略，大力推動 5G、人工智能、大數據等前沿技術在文旅產業的深入融合。在此背景下，智慧文旅應用創新就成為行業發展的關鍵推動力。
結合 AI 技術賦能，智慧文旅將不僅極大優化旅游體驗和資源配置效率，還將有效促進地方經濟增長和文化交流，成為推動社會經濟可持續發展的重要引擎。
數字熊貓“蘇琳”的成功打造是“TeleTrip - 星辰文旅”的首次試點。作為央企大模型機構，TeleAI 希望不僅為阿壩州景區帶來數字化、智能化的創新體驗，同時以此為標桿，賦能全國更多文旅場景，推動國內大模型技術創新向產業落地躍遷，引領文化旅游產業的全新風向標。
相關推薦
- 免責聲明
- 本文所包含的觀點僅代表作者個人看法，不代表新火種的觀點。在新火種上獲取的所有信息均不應被視為投資建議。新火種對本文可能提及或鏈接的任何項目不表示認可。 交易和投資涉及高風險，讀者在采取與本文內容相關的任何行動之前，請務必進行充分的盡職調查。最終的決策應該基于您自己的獨立判斷。新火種不對因依賴本文觀點而產生的任何金錢損失負任何責任。
