新火種
2023-11-23 
大模型一本正經“胡說八道”怎么破？IDEA研究院最新成果重磅亮相
11月22日，2023 IDEA大會在深圳舉行。IDEA研究院創院理事長、美國國家工程院外籍院士沈向洋在會上發表主旨演講，并發布IDEA研究院的重磅研產結晶與市場化成果。視覺提示模型T-Rex今年4月，IDEA研究院曾推出能夠“一句話檢測、分割一切”的Grounded SAM，通過文字提示實現精準的目標檢測，極大降低了技術使用與落地門檻，在Github上火爆出圈。
此次，同個研究團隊帶來新作：視覺提示模型T-Rex。T-Rex是一個開箱即用的模型，無需重新訓練或微調，即可檢測模型在訓練階段從未見過的物體。產品研究團隊表示，在真實應用場景中，許多罕見、復雜物體難以用文字充分描述，視覺提示的加入能夠有效解決這一痛點。直觀的視覺反饋與強交互性，也有助于提升檢測的效率和精準度。
大會現場，沈向洋還發布了T-Rex的模型實驗室（playground），Interactive Visual Prompt（iVP），用戶可親自試玩解鎖“一圖勝千言”的prompting新體驗。Think-on-Graph思維圖譜技術大模型雖好，但“一本正經的胡說八道”怎么解？大模型存在深度推理能力差、知識不可追溯、實時更新代價高等局限性，這也成為其在許多嚴肅領域落地的主要瓶頸。如何彌補大模型的這部分缺陷，是當下AI應用的重要課題。
為此，IDEA研究院團隊研發了Think-on-Graph（思維圖譜）技術，讓大模型和知識圖譜強強聯合。總體來說，大模型更擅長意圖理解和自主學習；而知識圖譜因其結構化的知識存儲方式，擅長邏輯鏈條推理，具有更佳的可解釋性與可實時更新性。Think-on-Graph通過實現兩者的緊耦合交互，驅動大模型agent在知識圖譜上“思考”，逐步搜索推理出最優答案（在知識圖譜的關聯實體上一步一步搜索推理）。每一步推理中，大模型都親自參與，與知識圖譜相互取長補短。兩大語言類項目引人注目除了在人工智能方向上一往無前，IDEA研究院還十分重視計算機科學領域中其他分支的創新，沈向洋在會上重點介紹了兩個語言類項目。
今年8月，由IDEA研究院推出的MoonBit月兔在Hacker News（由Y Combinator創辦的知名科創社區）登上頭版頭條。MoonBit 是由Wasm驅動，專為云計算與邊緣計算設計的開發者平臺，同時利用AI大模型賦能傳統工具鏈，提升代碼生成效率。IDEA研究院展示的另一門新語言，是區塊鏈并行智能合約語言GCL，其旨在打造區塊鏈系統上的最優解決方案。成立三年帶來一批優秀創業項目近年來，技術創業已然成為許多技術創新者的下一站。成立剛滿三年，IDEA研究院也帶來一批已經或正在走向大市場的優秀創業項目。這些項目中，既有主打AI for Scientists的AI科研產品ReadPaper，也有為數據要素可信流通提供硬件級安全保障的SPU機密計算協處理器、SPU-G異構AI協處理器，還有基于自研知識圖譜與生物醫學領域大模型的腦卒中智能防護產品StroCare。
除了讓跨學科、跨界人才在IDEA的平臺上碰撞出火花，IDEA也積極與產業伙伴合作，將技術應用到場景，深入到業務中去。今年，萬科IDEA聯合實驗室推出了自主研發的幾何建模與約束引擎，填補在工業設計軟件領域的國產空白。自2021年宣布成立以來，該實驗室已在深圳、上海建設起一支集合圖像學、幾何計算、視覺技術、機器學習等領域頂尖人才的研究隊伍。此外，IDEA研究院還通過CTO Labs平臺與一批獨角獸企業和瞪羚企業聯合創新，合作伙伴包括數說故事、晶泰科技、翼方健數等。本次IDEA大會上，IDEA視見睿來實驗室發布了HiveNet可控人像視頻生成平臺，實現AI技術方案對傳統視頻拍攝流程（編、導、拍、演、剪）的全面替代。（作者：讀特融媒體記者 邱思艷 文/圖）
相關推薦
- 免責聲明
- 本文所包含的觀點僅代表作者個人看法，不代表新火種的觀點。在新火種上獲取的所有信息均不應被視為投資建議。新火種對本文可能提及或鏈接的任何項目不表示認可。 交易和投資涉及高風險，讀者在采取與本文內容相關的任何行動之前，請務必進行充分的盡職調查。最終的決策應該基于您自己的獨立判斷。新火種不對因依賴本文觀點而產生的任何金錢損失負任何責任。
