首頁 > 快訊 > 上海人工智能實驗室葛佳燁：大模型評測亟需可靠的數(shù)據(jù)污染檢測技術(shù)

上海人工智能實驗室葛佳燁：大模型評測亟需可靠的數(shù)據(jù)污染檢測技術(shù)

新火種    2024-04-15

14日訊，在“知乎AI先行者沙龍”上，上海人工智能實驗室司南大模型評測產(chǎn)品負責(zé)人葛佳燁表示，大語言模型評測中面臨全面性、評測成本、數(shù)據(jù)污染、魯棒性等挑戰(zhàn)。她表示，評測數(shù)十萬道題需要大量算力資源，基于人工打分的主觀評測成本高昂。同時，海量語料不可避免帶來評測集污染，亟需可靠的數(shù)據(jù)污染檢測技術(shù)。此外，大模型對提示詞十分敏感，多次采樣情況下模型性能不穩(wěn)定。（記者 黃心怡）

相關(guān)推薦
免責(zé)聲明
本文所包含的觀點僅代表作者個人看法，不代表新火種的觀點。在新火種上獲取的所有信息均不應(yīng)被視為投資建議。新火種對本文可能提及或鏈接的任何項目不表示認可。 交易和投資涉及高風(fēng)險，讀者在采取與本文內(nèi)容相關(guān)的任何行動之前，請務(wù)必進行充分的盡職調(diào)查。最終的決策應(yīng)該基于您自己的獨立判斷。新火種不對因依賴本文觀點而產(chǎn)生的任何金錢損失負任何責(zé)任。

熱門文章