首批通過，最高評級，商湯小浣熊喜提中國信通院代碼大模型能力評估“三好生”

6月11日，中國信息通信研究院（以下簡稱“信通院”）公布可信AI代碼大模型首輪評估結果，商湯小浣熊獲得最高評級（4+級），在代碼通用能力、專用場景和應用成熟度多個評估維度中表現優秀。

信通院在2024上半年正式啟動可信AI代碼大模型評估，以《智能化軟件工程技術和應用要求 第1部分：代碼大模型》標準為評估依據，該標準也是業內首個代碼大模型標準，其涵蓋通用能力、專用場景能力和應用成熟度三大部分，包括16個能力項、100多個能力要求，全面從輸入多樣性、任務多樣性、語言完備度、結果可接收性、結果準確度等維度，考核代碼大模型的全棧技術能力。

圖片來源：中國信息通信研究院

商湯小浣熊是本次評分最高的代碼大模型之一，作為首批參評企業獲得4+級評級，信通院給出測評結論：

在通用能力方面，其代碼解釋、代碼轉換等方面表現突出；

在專用場景方面，其支持網站開發、桌面應用開發、移動應用開發、數據庫開發等多個場景的開發能力；

在應用成熟度方面，其數據分類分級、模型性能、模型服務可維護性、風險可控性等方面均表現優秀。

「小浣熊家族」是基于商湯“日日新SenseNova”大模型體系打造的 AI Native 生產力系列工具，覆蓋軟件開發、數據分析、編程教育等多個場景，旨在通過先進的人工智能技術優化和提升工作效率。

小浣熊家族現已推出代碼小浣熊和辦公小浣熊兩位產品成員。

官網鏈接：https://raccoon.sensetime.com/login?utm_source=JUNEXTY

其中，代碼小浣熊是基于大模型的軟件智能研發助手，覆蓋軟件需求分析、架構設計、代碼編寫、軟件測試等環節，滿足用戶代碼編寫、編程學習等各類需求，現已支持Python、Java、JavaScript、C++、Go、SQL等90+主流編程語言和VS Code, JetBrains全家桶、Android Studio等主流IDE。

辦公小浣熊則是基于大模型的大模型原生數據分析產品，可以通過用戶的自然語言輸入，自動將數據轉化為有意義的分析和可視化結果。

小浣熊家族背后的「小浣熊代碼大模型」，在權威測試集HumanEval Coding測試中一次通過率達到78.1%，在數據分析場景下的數據測試集（1000+題目）中以85.71%的正確率超過GPT-4。

小浣熊代碼大模型自上線以來，累計為10萬+個人用戶提供服務，單日代碼生成數量達到10億+Tokens，總體平均代碼采納率超過30%，用戶編碼能效提升達到20%~78%。

在企業用戶方面，商湯小浣熊代碼大模型已經被包括金融、新能源汽車等行業在內的200+以上企業客戶使用，憑借其突出的數理能力覆蓋多元落地場景。

例如，在與金山辦公的合作中，小浣熊代碼大模型憑借卓越的代碼生成及工具調用能力助力WPS 365打造更高效釋放場景能力的智能辦公平臺，為用戶多元、碎片化的辦公需求提供新質生產力。

在金融領域，基于小浣熊代碼大模型，商湯科技與海通證券合作打造智能研發助手，輔助金融企業研發人員進行代碼編程，為開發者提供代碼智能補全與對話問答服務，可輔助生產代碼約20%代碼，降低開發技術門檻，有效提高開發效率。在減少開發者重復工作同時，還能幫助團隊更早發現并修正開發中的錯誤，提升軟件交付質量。

未來，商湯小浣熊將持續降低大模型技術的開發和應用門檻，賦能更多場景實現創新。