星環(huán)科技近日宣布,其企業(yè)級(jí)大模型運(yùn)營(yíng)管理平臺(tái)Sophon LLMOps現(xiàn)已全面支持DeepSeek R1的全參版本以及蒸餾版本。這一消息標(biāo)志著星環(huán)科技在AI大模型管理領(lǐng)域邁出了重要一步。
Sophon LLMOps作為一款功能強(qiáng)大的企業(yè)級(jí)平臺(tái),致力于為用戶提供全面的大模型運(yùn)營(yíng)管理解決方案。該平臺(tái)支持大模型與小模型的統(tǒng)一管理,能夠輕松納管開源及商業(yè)化大模型,滿足用戶多樣化的需求。同時(shí),Sophon LLMOps還具備底層國(guó)內(nèi)外GPU/NPU(ARM/x86)異構(gòu)算力的混合部署能力,實(shí)現(xiàn)了資源的精細(xì)化切分及高效調(diào)度,進(jìn)一步提升了系統(tǒng)的靈活性和性能。
此外,Sophon LLMOps還提供了模型及應(yīng)用效果評(píng)估、全局狀態(tài)監(jiān)控及預(yù)警等功能,幫助用戶實(shí)時(shí)掌握模型運(yùn)行狀況,確保系統(tǒng)的穩(wěn)定運(yùn)行。這些功能的加入,使得Sophon LLMOps成為了一款真正意義上的企業(yè)級(jí)大模型運(yùn)營(yíng)管理平臺(tái),為用戶提供了從模型部署到運(yùn)行管理的全方位支持。
-
星環(huán)科技
+關(guān)注
關(guān)注
0文章
37瀏覽量
2768 -
大模型
+關(guān)注
關(guān)注
2文章
3146瀏覽量
4074 -
DeepSeek
+關(guān)注
關(guān)注
1文章
798瀏覽量
1755
發(fā)布評(píng)論請(qǐng)先 登錄
DeepSeek開源新版R1 媲美OpenAI o3
RK3588開發(fā)板上部署DeepSeek-R1大模型的完整指南
OpenAI O3與DeepSeek R1:推理模型性能深度分析
IBM在watsonx.ai平臺(tái)推出DeepSeek R1蒸餾模型
了解DeepSeek-V3 和 DeepSeek-R1兩個(gè)大模型的不同定位和應(yīng)用選擇
DeepSeek V3/R1滿血版登陸華為云
景嘉微完成DeepSeek R1系列模型適配
Deepseek R1大模型離線部署教程

部署DeepSeek R1于AX650N與AX630C平臺(tái)

扣子平臺(tái)支持DeepSeek R1與V3模型
Krea發(fā)布Deepseek R1驅(qū)動(dòng)的Chat功能
云天勵(lì)飛上線DeepSeek R1系列模型

評(píng)論