新火種
2023-12-23 
中國網(wǎng)絡(luò)空間安全協(xié)會發(fā)布用于大模型的首批中文基礎(chǔ)語料庫
中文基礎(chǔ)語料庫頁面截圖。
澎湃新聞從中國網(wǎng)絡(luò)空間安全協(xié)會獲悉，12月20日，中國網(wǎng)絡(luò)空間安全協(xié)會人工智能安全治理專業(yè)委員會在北京發(fā)布了用于大模型的首批中文基礎(chǔ)語料庫。
中國網(wǎng)絡(luò)空間安全協(xié)會相關(guān)負責人介紹，在中央網(wǎng)信辦相關(guān)業(yè)務部門指導下，網(wǎng)安協(xié)會人工智能安全治理專委會會同國家權(quán)威機構(gòu)，發(fā)揮企業(yè)、高校和科研單位協(xié)同優(yōu)勢，通過“共建－共享”機制，匯聚一批高質(zhì)量可信數(shù)據(jù)，經(jīng)過去重、過濾等技術(shù)手段，形成并對社會發(fā)布首批120G中文基礎(chǔ)語料，包括1億余條數(shù)據(jù)，500億個token。用戶登錄中國網(wǎng)絡(luò)空間安全協(xié)會網(wǎng)站，點擊“中文基礎(chǔ)語料庫”鏈接，通過注冊、認證等程序，就能夠下載相關(guān)語料。中文基礎(chǔ)語料庫的發(fā)布，是各界協(xié)同匯聚形成高質(zhì)量語料庫的初步成果。
網(wǎng)安協(xié)會人工智能安全治理專委會負責人表示，語料庫建設(shè)是一項長期性、專業(yè)性的工作，需要遵循相應法規(guī)、標準和規(guī)范，需要合力共建、突破創(chuàng)新，推動形成科學有效的語料庫匯聚、處理、使用機制，為國家人工智能技術(shù)創(chuàng)新和產(chǎn)業(yè)發(fā)展賦能。
相關(guān)推薦
- 免責聲明
- 本文所包含的觀點僅代表作者個人看法，不代表新火種的觀點。在新火種上獲取的所有信息均不應被視為投資建議。新火種對本文可能提及或鏈接的任何項目不表示認可。 交易和投資涉及高風險，讀者在采取與本文內(nèi)容相關(guān)的任何行動之前，請務必進行充分的盡職調(diào)查。最終的決策應該基于您自己的獨立判斷。新火種不對因依賴本文觀點而產(chǎn)生的任何金錢損失負任何責任。
