聯影智能@CCR,多模態醫療大模型牽引醫療場景全新蝶變
11月14日至17日,以“規范創新 · 引領發展”為主題的 2024 年中華醫學會放射學年會(以下簡稱:CCR)在上海盛大舉辦。
年會現場,來自全國各地放射學分會及影像技術分會的專家學者齊聚一堂,共議放射學領域的新技術、新場景、新應用。作為聯影集團在人工智能領域的重要戰略布局,聯影智能聚焦臨床診療、醫療大模型等領域,攜60余款影像輔助診斷AI應用以及醫療大模型產品亮相CCR,以AI創新力繪制智能醫療未來。
聯影展區
數質賦能新質發展,大模型時代奔涌而來
近十年來,醫療數據以驚人的速度增長,與此同時,全球醫療健康需求也持續增加,時代正在呼喚更高效、精準的醫療大模型給醫療行業帶來新變革。
本屆CCR的主旨報告環節,聯影智能聯席CEO沈定剛教授帶來《多模態醫療大模型:應用與展望》的主題演講。
聯影智能聯席CEO沈定剛教授在主題演講現場
“在醫學應用領域,基于傳統算法的AI「小模型」目前已進入較為成熟的階段。目前,聯影智能已推出 100+AI應用,其中獲批NMPA三類證FDA、CE認證的產品均超十余款。而在這個過程中積累的場景與落地經驗、模型基礎與模型能力、海量數據與標注等,都為大模型的智能蝶變打下堅實的基礎?!鄙蚨▌偨淌谠谘葜v中表示。
現場,沈定剛教授也分別分享了聯影智能在醫療影像大模型、醫療文本大模型、醫療混合模態大模型方面的最新成果。
基于海量醫學影像數據訓練出的uAl影智大模型在全身不同部位、不同模態的分割任務中表現更精準高效,泛化性更強。
在跨模態影像分割的應用方面,uAI影智大模型在8種器官分割任務中的分割準確性,均要優于單一任務的小模型。即使在沒有訓練過某些期相任務的情況下,大模型也可充分利用不同器官之間的相關性,保持卓越的分割效果。
在生成式AI對視頻分割的助力方面,以數字減影血管造影(DSA)為例,不僅數據難收集,而且由于圖像中的造影導絲非常細,背景存在較多噪音,對導絲的分割和追蹤也是極具挑戰性。而基于uAI影智大模型,可根據標注完成少量數據,生成具有不同背景的DSA視頻,再將生成的數據參與到模型訓練后,經過驗證,造影導絲的分割準確性可提升6%。
醫療文本大模型已在入院錄/首程錄輔助書寫、跨院醫療資料數字化等場景下實現應用,大幅提升醫療記錄的實時性、準確性和完整性,帶給醫生更高效的報告記錄體驗。
聯影智能文本大模型產品,已在復旦大學附屬中山醫院落地,能夠輔助醫生一鍵生成住院場景中多種類型的醫療報告,包括患者入院錄、首程錄、查房錄、出院小結等,重塑報告書寫模式,帶給醫生更高效的報告記錄體驗。
值得一提的是,中山醫院x聯影智能uAI影智大模型落地案例已成功入選中國信通院華東分院聯合上海人工智能實驗室重磅發布的《2024大模型典型示范應用案例集》,該榜單以產業化為導向,篩選具備先進性、引領性、示范性的典型案例,是具備行業影響力的大模型領域權威成果。
基于在文本、影像等混合模態的技術積累,聯影智能在多序列MR腦影像融合診斷、CT 胸部影像一掃多查、輔助 PET/CT 診斷結論生成、手術治療等場景實現應用。
在最為復雜的手術場景,香港大學牙醫學院口腔頜面外科團隊基于聯影智能uAI MERITS多元手術規劃平臺,完成了全球首例混合醫療大模型驅動的口腔頜面整復外科手術。
基于醫療混合模態大模型技術的另一成果,是聯影智能影智醫聲報告系統的應用。該系統可基于對醫生的語音識別,智能分析語音描述、自動匹配影像部位,并可根據語音指令智能生成規范化的檢查結論。通過語音加持診斷報告書寫,讓該流程更加快速、簡單、規范。
瞄準臨床診療痛點,打造全場景覆蓋??平鉀Q方案
醫療場景復雜多變,傳統單點、單線的AI應用模式,難以與多個醫療場景實現深度融合。
如何實現AI全場景覆蓋,打造全鏈互通的智能解決方案,以提升醫療服務的效率和質量?
基于「將AI場景化覆蓋」的思維,聯影智能展出uAI ??圃\療解決方案,覆蓋腫瘤、心臟、神經、胸部、骨科、泛血管、手術七大關鍵場景,讓AI實現場景化無縫融合。
隨著以ChatGPT、SORA為代表的大模型在語意理解、視頻生產、知識推理等方面展現出令人驚艷的能力,以大模型為核心的人工智能時代正奔涌而來。
相信在不遠的未來,大模型一定也會引領醫療行業升維發展,帶來高質高效和全新體驗的涌現和蝶變,為醫療場景持續賦能。
- 免責聲明
- 本文所包含的觀點僅代表作者個人看法,不代表新火種的觀點。在新火種上獲取的所有信息均不應被視為投資建議。新火種對本文可能提及或鏈接的任何項目不表示認可。 交易和投資涉及高風險,讀者在采取與本文內容相關的任何行動之前,請務必進行充分的盡職調查。最終的決策應該基于您自己的獨立判斷。新火種不對因依賴本文觀點而產生的任何金錢損失負任何責任。