一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

美格智能AIMO智能體+DeepSeek-R1模型,AI應(yīng)用的iPhone時(shí)刻來了

美格智能 ? 2025-01-28 15:50 ? 次閱讀

導(dǎo)語:

當(dāng)AI大模型從云端下沉至終端設(shè)備,一場(chǎng)關(guān)于效率、隱私與智能化的革命悄然展開。作為全球領(lǐng)先的無線通信模組及解決方案提供商,美格智能憑借其高算力AI模組矩陣與端側(cè)大模型部署經(jīng)驗(yàn),結(jié)合最新發(fā)布的AIMO智能體產(chǎn)品,正加速開發(fā)DeepSeek-R1模型在端側(cè)落地應(yīng)用及端云結(jié)合整體方案,助力國(guó)產(chǎn)優(yōu)質(zhì)模型滲透千行百業(yè),共塑智能化未來。

AIMO智能體硬件加速迭代,AI硬件與大模型協(xié)同優(yōu)化

美格智能基于高通驍龍高性能計(jì)算平臺(tái)打造的AIMO智能體產(chǎn)品,集成48Tops AI算力,支持混合精度計(jì)算(INT4/FP8)與異構(gòu)計(jì)算架構(gòu)(8核CPU+Adreno GPU+Hexagon NPU),可高效承載7B參數(shù)級(jí)大模型的端側(cè)推理需求。其板載16GB LPDDR5X內(nèi)存與256GB UFS 4.0存儲(chǔ),為模型動(dòng)態(tài)加載與實(shí)時(shí)數(shù)據(jù)處理提供硬件保障。2025年美格智能將推出單顆模組算力達(dá)到100Tops的高階AI硬件,遠(yuǎn)期規(guī)劃AI模組算力超過200Tops。

wKgZO2eV-OWAQfzeAARc7OEm4tk894.png

美格智能已成功在高算力AI模組上部署LLaMA-2、通義千問Qwen、ChatGLM2等大模型,驗(yàn)證了從模型壓縮(量化、剪枝)到框架適配(ONNX/TFLite)的全流程能力。美格智能自研的MEIG AI算法部署平臺(tái)、AIMO智能體、模型優(yōu)化器等,可大幅縮短模型落地周期,支持開發(fā)者通過Python快速完成應(yīng)用開發(fā),并支持開發(fā)者進(jìn)行模型訓(xùn)練。

AIMO智能體內(nèi)置的高算力AI模組的異構(gòu)計(jì)算架構(gòu),具備協(xié)同加速能力,支持模型并行計(jì)算與低功耗運(yùn)行,LPDDR5X內(nèi)存提供超過60GB/s帶寬,滿足7B模型推理時(shí)的高吞吐需求。內(nèi)置專用AI加速引擎支持INT4/FP16混合精度計(jì)算,與DeepSeek-R1模型的量化格式(INT4/FP8)高度適配。

DeepSeek-R1低調(diào)亮相,蒸餾小模型超越OpenAI o1-mini

DeepSeek-R1采用強(qiáng)化學(xué)習(xí)邏輯,驅(qū)動(dòng)通過多階段RL訓(xùn)練(基礎(chǔ)模型→RL→微調(diào)迭代),DeepSeek-R1在數(shù)學(xué)、代碼、邏輯推理任務(wù)中表現(xiàn)比肩國(guó)際頂尖模型,如AIME數(shù)學(xué)競(jìng)賽準(zhǔn)確率達(dá)71%。DeepSeek-R1提供輕量化適配:DeepSeek-R1系列提供1.5B至70B參數(shù)蒸餾版本,其中7B模型經(jīng)INT4量化后僅需2-4GB存儲(chǔ),完美適配終端設(shè)備內(nèi)存限制。DeepSeek-R1的動(dòng)態(tài)思維鏈,支持?jǐn)?shù)萬字級(jí)內(nèi)部推理過程,解決復(fù)雜問題時(shí)能自主拆解步驟并驗(yàn)證邏輯,輸出可解釋性更強(qiáng)的結(jié)果。

wKgZPGeV-OaABRNJAAMYGXMVSNA332.png

DeepSeek在開源DeepSeek-R1-Zero和DeepSeek-R1兩個(gè)660B模型的同時(shí),通過DeepSeek-R1的輸出,蒸餾了6個(gè)小模型開源給社區(qū),其中32B和70B模型在多項(xiàng)能力上實(shí)現(xiàn)了對(duì)標(biāo)OpenAI o1-mini的效果。除32B和70B模型能力強(qiáng)悍外,DeepSeek-R1同步開源1.5B、7B、8B、14B等多個(gè)蒸餾小模型,極大擴(kuò)展了終端側(cè)模型部署的可選性,并支持用戶進(jìn)行“模型蒸餾”,明確允許用戶利用模型輸出、通過模型蒸餾等方式訓(xùn)練其他模型。

以DeepSeek-R1 7B模型的端側(cè)適配性舉例,該模型具備輕量化設(shè)計(jì)特征,經(jīng)蒸餾和量化后模型體積壓縮至2-4GB,很好的匹配移動(dòng)端存儲(chǔ)限制。模型具備低延遲推理能力,在高算力模組平臺(tái)上,可實(shí)現(xiàn)10-20 tokens/s的生成速度。模型支持分塊推理和稀疏計(jì)算,結(jié)合美格智能高算力AI模組的能效優(yōu)化,能實(shí)現(xiàn)極低的功耗控制。

算力與模型的技術(shù)迭代,AI應(yīng)用的iPhone時(shí)刻即將帶來

美格智能研發(fā)團(tuán)隊(duì)結(jié)合AIMO智能體、高算力AI模組的異構(gòu)計(jì)算能力,結(jié)合多款模型量化、部署、功耗優(yōu)化Know-how,正在加速開發(fā)DeepSeek-R1模型在端側(cè)落地應(yīng)用及端云結(jié)合整體方案。

wKgZO2eV-OiAS-j8AAPHEBsvcUw941.png

?超低功耗

首先持續(xù)對(duì)DeepSeek-R1模型的推理延遲進(jìn)行優(yōu)化,保證模型在高算力模組軟硬件環(huán)境下的超低功耗運(yùn)行。

?開發(fā)工具鏈

不斷進(jìn)行工具鏈打通,模組內(nèi)嵌的SNPE引擎直接支持DeepSeek-R1模型的ONNX/TFLite格式,大模型適配周期將大幅縮短。

?端云協(xié)同

結(jié)合動(dòng)態(tài)卸載技術(shù),根據(jù)任務(wù)復(fù)雜度自動(dòng)分配端側(cè)與邊緣計(jì)算資源,保障實(shí)時(shí)性與能效平衡。為客戶提供端云協(xié)同模板,面向開發(fā)者提供動(dòng)態(tài)任務(wù)分配框架,簡(jiǎn)單配置即可實(shí)現(xiàn)“本地優(yōu)先,云端兜底”。

通過高階AI硬件與DeepSeek-R1模型的能力結(jié)合,將突破端側(cè)AI的能力邊界。7B模型支持長(zhǎng)文本理解、代碼生成等傳統(tǒng)端側(cè)小模型無法完成的任務(wù)。多模態(tài)融合能力,高算力AI模組的ISP+AI能力結(jié)合DeepSeek-R1模型,可實(shí)現(xiàn)端側(cè)圖文問答、視頻內(nèi)容解析(如實(shí)時(shí)字幕生成)。個(gè)性化持續(xù)學(xué)習(xí),通過AI模組的邊緣計(jì)算能力,支持聯(lián)邦學(xué)習(xí)框架下的本地模型微調(diào)(如用戶習(xí)慣適配)。

在算力+模型的不斷迭代背后,端側(cè)AI及端云協(xié)同的商業(yè)模式和商業(yè)競(jìng)爭(zhēng)力都將面臨重構(gòu),DeepSeek-R1的發(fā)布,更是會(huì)極大刺激AI下游應(yīng)用,如工業(yè)智能化、汽車Agent、機(jī)器人、個(gè)人大模型等應(yīng)用場(chǎng)景的指數(shù)級(jí)增長(zhǎng),AI應(yīng)用即將迎來屬于自己的iPhone時(shí)刻。

?基于DeepSeek-R1的AI Agent開發(fā)應(yīng)用

結(jié)合美格智能自研的AIMO智能體及DeepSeek-R1模型的基礎(chǔ)能力,開發(fā)面向工業(yè)智能化、座艙智能體、智能無人機(jī)、機(jī)器人等領(lǐng)域的AI Agent應(yīng)用。

?端側(cè)AI能力包

推出面向AI場(chǎng)景的訂閱服務(wù),針對(duì)中小型的B端或C端客戶,推出“端側(cè)AI能力包”,與大模型廠商合作,針對(duì)Token輸入/輸出數(shù)量、不同類型模型調(diào)用、流量費(fèi)用等領(lǐng)域,推出一體化端側(cè)AI Turn-key方案。

?智能化硬件增值

商業(yè)模式方面,各類高AI配置硬件疊加端側(cè)模型加載或云端模型接入,為高算力硬件帶來更多智能化增值。

?自建GPU服務(wù)器與個(gè)性化專屬大模型開發(fā)

美格研發(fā)團(tuán)隊(duì)持續(xù)拓展通用模型的部署通路,并不斷向客戶開放相關(guān)教程和源代碼,并且以最新的高算力計(jì)算平臺(tái)搭建GPU服務(wù)器,可用于端側(cè)模型訓(xùn)練和支持客戶開發(fā)專屬大模型,結(jié)合DeepSeek-R1及其寬松、開放式的MIT授權(quán)協(xié)議,千行百業(yè)的個(gè)性化模型開發(fā)和應(yīng)用即將爆發(fā)。

2025年,端側(cè)AI、端云協(xié)同等各類AI應(yīng)用的iPhone時(shí)刻將加速到來。DeepSeek-R1的出現(xiàn),某種程度上改變了我們對(duì)于Scale的認(rèn)知,但也不會(huì)帶來云端算力的需求減少甚至崩塌,相反優(yōu)質(zhì)模型對(duì)于AI應(yīng)用場(chǎng)景的極大刺激,也會(huì)推動(dòng)云端算力需求的提升,端側(cè)不斷進(jìn)化,云端負(fù)責(zé)兜底,端云結(jié)合終將是不變的方向。

美格智能也將持續(xù)以高算力AI模組、AI Agent應(yīng)用、大模型部署服務(wù)、端側(cè)AI服務(wù)整體解決方案為基石,攜手大模型廠商、生態(tài)伙伴等不斷推動(dòng)類似DeepSeek-R1等優(yōu)秀模型的應(yīng)用拓展,讓普惠、自主的高階AI實(shí)現(xiàn)應(yīng)有的社會(huì)價(jià)值。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    33554

    瀏覽量

    274196
  • 智能體
    +關(guān)注

    關(guān)注

    1

    文章

    230

    瀏覽量

    10892
  • 美格智能
    +關(guān)注

    關(guān)注

    2

    文章

    267

    瀏覽量

    11534
  • 大模型
    +關(guān)注

    關(guān)注

    2

    文章

    2941

    瀏覽量

    3683
  • DeepSeek
    +關(guān)注

    關(guān)注

    1

    文章

    755

    瀏覽量

    1050
收藏 人收藏

    評(píng)論

    相關(guān)推薦

    如何使用OpenVINO運(yùn)行DeepSeek-R1蒸餾模型

    DeepSeek-R1在春節(jié)期間引發(fā)了全球科技界的熱度,DeepSeek-R1 是由 DeepSeek 開發(fā)的開源推理模型,用于解決需要邏輯推理、數(shù)學(xué)問題解決和實(shí)時(shí)決策的任務(wù)。
    的頭像 發(fā)表于 03-12 13:45 ?1065次閱讀
    如何使用OpenVINO運(yùn)行<b class='flag-5'>DeepSeek-R1</b>蒸餾<b class='flag-5'>模型</b>

    MWC 2025|美格智能發(fā)布由高通技術(shù)賦能的全新AIMO Pro,搭載DeepSeek的48 TOPS高算力專屬AI智能

    2025年初,美格智能發(fā)布AI智能產(chǎn)品AIMO,憑借其強(qiáng)大的計(jì)算能力和開放性的軟件生態(tài),產(chǎn)品一
    的頭像 發(fā)表于 03-04 16:13 ?559次閱讀
    MWC 2025|<b class='flag-5'>美格</b><b class='flag-5'>智能</b>發(fā)布由高通技術(shù)賦能的全新<b class='flag-5'>AIMO</b> Pro,搭載<b class='flag-5'>DeepSeek</b>的48 TOPS高算力專屬<b class='flag-5'>AI</b><b class='flag-5'>智能</b><b class='flag-5'>體</b>

    RK3588開發(fā)板上部署DeepSeek-R1模型的完整指南

    DeepSeek作為國(guó)產(chǎn)AI大數(shù)據(jù)模型的代表,憑借其卓越的推理能力和高效的文本生成技術(shù),在全球人工智能領(lǐng)域引發(fā)廣泛關(guān)注。DeepSeek-R1
    發(fā)表于 02-27 16:45

    聯(lián)想moto手機(jī)集成DeepSeek-R1模型

    聯(lián)想moto官方近日正式宣布,其最新款AI手機(jī)已成功集成了DeepSeek-R1滿血版大模型。這款大模型擁有高達(dá)671B的滿血參數(shù),為用戶帶來了
    的頭像 發(fā)表于 02-14 14:36 ?332次閱讀

    了解DeepSeek-V3 和 DeepSeek-R1兩個(gè)大模型的不同定位和應(yīng)用選擇

    DeepSeek-V3 和 DeepSeek-R1 是深度求索公司(DeepSeek)推出的兩個(gè)不同定位的大模型,其核心差異主要體現(xiàn)在目標(biāo)場(chǎng)景、能力側(cè)重和技術(shù)優(yōu)化方向上。以下是二者的實(shí)
    發(fā)表于 02-14 02:08

    超星未來驚蟄R1芯片適配DeepSeek-R1模型

    日前,超星未來研發(fā)團(tuán)隊(duì)成功完成了驚蟄R1芯片對(duì)DeepSeek-R1模型的適配工作,實(shí)現(xiàn)了與用戶之間的流暢對(duì)話。這一成果標(biāo)志著超星未來在人工智能芯片和
    的頭像 發(fā)表于 02-13 14:05 ?451次閱讀

    Deepseek R1模型離線部署教程

    。作為國(guó)產(chǎn)AI大數(shù)據(jù)模型的代表,憑借其卓越的推理能力和高效的文本生成技術(shù),在全球人工智能領(lǐng)域引發(fā)廣泛關(guān)注。 本文主要說明DeepSeek-R1如何離線運(yùn)行在EASY-EAI-Orin-
    的頭像 發(fā)表于 02-12 09:37 ?1382次閱讀
    <b class='flag-5'>Deepseek</b> <b class='flag-5'>R1</b>大<b class='flag-5'>模型</b>離線部署教程

    廣汽ADiGO SENSE端云一模型DeepSeek-R1模型完成深度融合

    ? 2025年2月8日,一段實(shí)車視頻演示了廣汽智能車機(jī)借助DeepSeek-R1模型回答語音提問的表現(xiàn),這標(biāo)志著廣汽自主研發(fā)的ADiGO SENSE端云一
    的頭像 發(fā)表于 02-10 09:21 ?728次閱讀

    軟通動(dòng)力天璇MaaS融合DeepSeek-R1,引領(lǐng)企業(yè)智能化轉(zhuǎn)型

    近期,國(guó)產(chǎn)高性能AI推理模型DeepSeek-R1AI領(lǐng)域引發(fā)了廣泛關(guān)注。憑借其強(qiáng)化學(xué)習(xí)驅(qū)動(dòng)的推理能力、高性能低成本的優(yōu)勢(shì)以及開源策略,DeepS
    的頭像 發(fā)表于 02-08 09:57 ?492次閱讀

    deepin UOS AI接入DeepSeek-R1模型

    DeepSeek-R1 模型自發(fā)布以來吸引了眾多用戶關(guān)注,為了讓 deepin 用戶更好地體驗(yàn)這一前沿技術(shù),UOS AI 現(xiàn)已適配接入 DeepSeek-R1 端側(cè)
    的頭像 發(fā)表于 02-08 09:52 ?735次閱讀

    芯動(dòng)力神速適配DeepSeek-R1模型,AI芯片設(shè)計(jì)邁入“快車道”!

    近期,國(guó)產(chǎn)大模型 DeepSeek-R1橫空出世,迅速成為AI領(lǐng)域的焦點(diǎn)。 芯動(dòng)力在24小時(shí)內(nèi)完成了與DeepSeek-R1模型的適配。
    的頭像 發(fā)表于 02-07 16:55 ?466次閱讀
    芯動(dòng)力神速適配<b class='flag-5'>DeepSeek-R1</b>大<b class='flag-5'>模型</b>,<b class='flag-5'>AI</b>芯片設(shè)計(jì)邁入“快車道”!

    網(wǎng)易有道全面接入DeepSeek-R1模型

    近日,網(wǎng)易有道宣布了一個(gè)重要決定,即全面接入DeepSeek-R1模型。這一舉措標(biāo)志著網(wǎng)易有道在AI技術(shù)方面邁出了重要一步,將為用戶帶來更加智能化、個(gè)性化的學(xué)習(xí)體驗(yàn)。 據(jù)悉,網(wǎng)易有道
    的頭像 發(fā)表于 02-07 14:42 ?905次閱讀

    原生鴻蒙版小藝App上架DeepSeek-R1AI智慧體驗(yàn)更豐富

    升級(jí)至11.2.10.310版本及以上,打開小藝App,點(diǎn)擊“發(fā)現(xiàn)”-“智能”-“DeepSeek-R1”,即可體驗(yàn)DeepSeek。或者也可以喚醒
    的頭像 發(fā)表于 02-07 13:24 ?767次閱讀

    中軟國(guó)際JointPilot平臺(tái)上線DeepSeek-R1模型

    近日,DeepSeek-R1模型憑借其開源優(yōu)勢(shì),超低訓(xùn)練成本和高性能,在全球人工智能領(lǐng)域引發(fā)廣泛關(guān)注。中軟國(guó)際積極擁抱AI時(shí)代變革,致力于將前沿技術(shù)與企業(yè)實(shí)際需求積極融合,其Joint
    的頭像 發(fā)表于 02-06 09:55 ?725次閱讀

    CES 2025 | 美格智能創(chuàng)新發(fā)布AI智能產(chǎn)品AIMO

    CES2025展會(huì)現(xiàn)場(chǎng),美格智能創(chuàng)新發(fā)布AI智能產(chǎn)品—AIMO,一款面向C端消費(fèi)者的個(gè)人化
    的頭像 發(fā)表于 01-10 09:03 ?783次閱讀
    CES 2025 | <b class='flag-5'>美格</b><b class='flag-5'>智能</b>創(chuàng)新發(fā)布<b class='flag-5'>AI</b><b class='flag-5'>智能</b><b class='flag-5'>體</b>產(chǎn)品<b class='flag-5'>AIMO</b>