首頁 > AI資訊 > 最新資訊 > 金融大模型應用評測指南在滬首發

金融大模型應用評測指南在滬首發

新火種    2024-12-15
上海標準再次在金融領域落地。昨天,在中共上海市委金融委員會辦公室、上海市經濟和信息化委員會指導下,上海市人工智能行業協會和上海金融業聯合會聯合發布全國首個以金融業務能力為核心的團體標準《金融大模型應用評測指南》,上海庫帕思科技有限公司發布多維度金融大模型評測數據集(2024版)。《金融大模型應用評測指南》以金融業務為核心,從模型基礎、金融安全與價值對齊、金融風險控制、金融專業認知、金融業務輔助拓展等5個維度185項指標要求著手,構建了金融領域大模型的能力測評框架,同時給出了相關的評測方法與工具以及評測分級標準。以模型基礎能力方面為例,圍繞模型基礎理解和推演功能,指南定義了包括文本分類、信息抽取等在內的11項單模態,圖文檢索、視頻問答等在內的6項多模態指標要求。金融安全與價值對齊能力方面,圍繞模型的可靠性、可解釋性以及隱私保護,指南設計了內容合規、文化價值、倫理價值等在內的9項指標要求。金融大模型評測數據集(2024版)是用于評測金融領域大模型應用成效的重要抓手。金融機構比照《金融大模型應用評測指南》能力測評框架,共設計評測數據44000余句對,幫助大模型“跑數據”。據介紹,評測數據集比照最高水平、最好標準,具有規模大、結構優、價值對齊等特點,符合金融領域對知識鮮活度、多樣性和高密度的整體要求。后續,金融評測數據集將定期更新,樣例集已在Open Data Lab和開放原子社區發布。
相關推薦
免責聲明
本文所包含的觀點僅代表作者個人看法,不代表新火種的觀點。在新火種上獲取的所有信息均不應被視為投資建議。新火種對本文可能提及或鏈接的任何項目不表示認可。 交易和投資涉及高風險,讀者在采取與本文內容相關的任何行動之前,請務必進行充分的盡職調查。最終的決策應該基于您自己的獨立判斷。新火種不對因依賴本文觀點而產生的任何金錢損失負任何責任。

熱門文章