新火種
2023-11-14 
GPT-4寫代碼不如ChatGPT，誤用率高達62%！加州大學兩位華人開源代碼可靠性基準RobustAPI
聲明:本文來自于
【新智元導讀】代碼能否跑起來的不是判斷可靠性的標準，用語言模型寫代碼還需要考慮生產環境下的預期外輸入。
大型語言模型（LLM）在理解自然語言和生成程序代碼方面展現出了非凡的性能，程序員們也開始在編碼過程中使用Copilot工具輔助編程，或是要求LLM生成解決方案。
經過幾版迭代后，目前LLM生成的代碼已經很少有語法錯誤了，也更貼合用戶輸入的文本、符合預期語義，但針對LLM代碼生成的可靠性和魯棒性仍然缺乏徹底的研究。
代碼的可執行并不等同于可靠，軟件的開發環境、部署環境都存在很大的不確定性。
Tags:
相關推薦
- 免責聲明
- 本文所包含的觀點僅代表作者個人看法，不代表新火種的觀點。在新火種上獲取的所有信息均不應被視為投資建議。新火種對本文可能提及或鏈接的任何項目不表示認可。 交易和投資涉及高風險，讀者在采取與本文內容相關的任何行動之前，請務必進行充分的盡職調查。最終的決策應該基于您自己的獨立判斷。新火種不對因依賴本文觀點而產生的任何金錢損失負任何責任。
