一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

借助 NVIDIA 融合加速器開發(fā)套件加速數(shù)據(jù)中心 AI

NVIDIA英偉達(dá) ? 來源:NVIDIA 英偉達(dá) ? 作者:NVIDIA 英偉達(dá) ? 2021-11-16 16:12 ? 次閱讀

現(xiàn)代數(shù)據(jù)中心變得越來越難以管理。應(yīng)用程序和 PB 級日志數(shù)據(jù)之間有數(shù)十億條可能的連接路徑。靜態(tài)規(guī)則不足以適應(yīng)動態(tài)微服務(wù)的安全策略,而且人工已經(jīng)無法應(yīng)對數(shù)量龐大的日志數(shù)據(jù)的分析。

AI 是通往未來安全和自主管理式數(shù)據(jù)中心的唯一出路。

NVIDIA 融合加速器在業(yè)界率先推出 AI 增強(qiáng)型 DPU。它將 GPU 的強(qiáng)大計(jì)算能力與 DPU 的網(wǎng)絡(luò)加速和安全優(yōu)勢相結(jié)合,為 AI 增強(qiáng)型數(shù)據(jù)中心管理創(chuàng)造了統(tǒng)一平臺。融合加速器可將 AI 生成的規(guī)則應(yīng)用于數(shù)據(jù)中心網(wǎng)絡(luò)中的每個(gè)數(shù)據(jù)包,為實(shí)現(xiàn)實(shí)時(shí)安全和管理創(chuàng)造新的可能性。圖像展示了將 BlueField-2 DPU 和 Ampere GPU 相結(jié)合的 NVIDIA 新型融合加速器。

在 NVIDIA GTC 大會上,我們推出了兩款新型融合加速器。A100X 在單一模組中融合了 A100 Tensor Core GPU 和 NVIDIA BlueField-2 DPU。A30X 則融合了 A30 Tensor Core GPU 和相同的 BlueField-2 DPU。融合卡具有獨(dú)特的能力,除了 BlueField-2 的卸載、隔離和加速網(wǎng)絡(luò)功能,進(jìn)一步拓展到 AI 推理和訓(xùn)練功能。

兩款加速器都包含一個(gè)集成的 PCIe 交換機(jī)實(shí)現(xiàn)DPU 和 GPU 連接。集成交換機(jī)能夠消除對主機(jī)資源的爭用,實(shí)現(xiàn)線速 GPUDirect RDMA 性能。集成交換機(jī)還通過隔離 GPU 和網(wǎng)卡之間移動的數(shù)據(jù)來提高安全性。

AI 增強(qiáng)型 DPU

融合加速器支持兩種運(yùn)行模式:

標(biāo)準(zhǔn)模式 – BlueField-2 DPU 和 GPU 分別獨(dú)立運(yùn)行。

BlueField-X模式 – PCI 交換機(jī)進(jìn)行了重新配置,GPU 將專用于 DPU,并且對于主機(jī)系統(tǒng)不可見。

在 BlueField-X 模式下,只有 DPU 上運(yùn)行的操作系統(tǒng)可見到GPU。BlueField-X 模式在業(yè)界首創(chuàng)了一種新型加速器類型:GPU 加速的 DPU。圖像展示了在 BlueField-X 模式下,主機(jī)服務(wù)器中的 CPU 連接到融合加速器。融合加速器的 PCIe 交換機(jī)連接到 CPU 和 DPU。而 GPU 僅通過 PCIe 交換機(jī)與 DPU連接。

在 BlueField-X 模式下,GPU 可以對流經(jīng) DPU 的數(shù)據(jù)運(yùn)行 AI 模型,成為 “bump in the wire”。保障安全同時(shí),無性能損耗。AI 模型無需消耗主機(jī)資源,實(shí)現(xiàn)完全加速。

BlueField-X 為網(wǎng)絡(luò)安全、數(shù)據(jù)中心管理和 I/O 加速解鎖新穎使用場景。例如,Morpheus 網(wǎng)絡(luò)安全框架使用機(jī)器學(xué)習(xí)對以往無法識別的安全威脅進(jìn)行有效處理。Morpheus 通過 DPU 從數(shù)據(jù)中心的各個(gè)服務(wù)器獲取遙測數(shù)據(jù),并將其發(fā)送到配備 GPU 的服務(wù)器進(jìn)行分析。

有了 BlueField-X,AI 模型可以在每個(gè)服務(wù)器的融合加速器上直接本地運(yùn)行。這使 Morpheus 能夠更快地分析更多數(shù)據(jù),同時(shí)消除代價(jià)很高的數(shù)據(jù)移動,并縮小惡意攻擊面。由 BlueField-X 加速的 Morpheus 使用案例包括惡意軟件檢測、數(shù)據(jù)泄漏預(yù)防和動態(tài)防火墻規(guī)則創(chuàng)建等。

Morpheus 示例僅僅是 BlueField-X 實(shí)現(xiàn)加速的一種使用場景。我們的客戶經(jīng)常與我們分享一些我們尚未考慮到的新想法。為了對 AI 增強(qiáng)的網(wǎng)絡(luò)進(jìn)行更多創(chuàng)造性的探索,我們現(xiàn)正推出 NVIDIA 融合加速器開發(fā)套件。

結(jié)合此開發(fā)套件,我們?yōu)橛幸鈽?gòu)建新一代加速 AI 網(wǎng)絡(luò)應(yīng)用的特定客戶和合作伙伴提供 A30X 加速器的搶先體驗(yàn)計(jì)劃。在邊緣計(jì)算或數(shù)據(jù)中心管理中探索 BlueField-X 的新應(yīng)用場景。以下例子為您做參考:

透明視頻預(yù)處理 – Bump-in-the-wire 視頻預(yù)處理(解密、交錯(cuò)、格式轉(zhuǎn)換等),以提高 IVA 吞吐量和攝像頭密度。

小基站 RU 解決方案 – RAN 信號處理聚合加速器,以增加商業(yè) gNodeB 服務(wù)器上的用戶密度和吞吐量。

計(jì)算存儲 – Bump-in-the-wire 存儲加密、索引和哈希,為長期存儲主機(jī)數(shù)據(jù)準(zhǔn)備處理卸載昂貴的 CPU 資源。

作弊檢測 – 檢測流式游戲服務(wù)中的惡意游戲/作弊

開始使用 NVIDIA 融合加速器開發(fā)套件

NVIDIA 融合加速器開發(fā)套件包含有結(jié)合 CUDA 和 NVIDIA DOCA 的示例應(yīng)用程序,以及幫助安裝、配置新型融合加速器的文檔。最重要的是,可提供 A30X 及應(yīng)用支持來換取用戶的寶貴反饋。

要開始使用,只需在 NVIDIA 融合加速器開發(fā)套件網(wǎng)頁上完成注冊。獲得批準(zhǔn)后,一旦硬件準(zhǔn)備好發(fā)貨,將由工作人員主動聯(lián)系。之后就可以開啟新一代加速應(yīng)用之旅了。

編輯:jq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 加速器
    +關(guān)注

    關(guān)注

    2

    文章

    821

    瀏覽量

    38803
  • gpu
    gpu
    +關(guān)注

    關(guān)注

    28

    文章

    4886

    瀏覽量

    130437
  • 主機(jī)
    +關(guān)注

    關(guān)注

    0

    文章

    1030

    瀏覽量

    35751
  • 數(shù)據(jù)中心
    +關(guān)注

    關(guān)注

    16

    文章

    5072

    瀏覽量

    73072
  • DPU
    DPU
    +關(guān)注

    關(guān)注

    0

    文章

    386

    瀏覽量

    24609

原文標(biāo)題:GTC21 | 借助 NVIDIA 融合加速器開發(fā)套件加速數(shù)據(jù)中心 AI

文章出處:【微信號:NVIDIA_China,微信公眾號:NVIDIA英偉達(dá)】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    首創(chuàng)開源架構(gòu),天璣AI開發(fā)套件讓端側(cè)AI模型接入得心應(yīng)手

    倍,可見天璣的AI開發(fā)者解決方案已經(jīng)被開發(fā)者高度認(rèn)可,天璣AI生態(tài)圈正在飛速成長起來。 聯(lián)發(fā)科與OPPO深度合作,共同研發(fā),借助天璣
    發(fā)表于 04-13 19:52

    是德科技推出AI數(shù)據(jù)中心構(gòu)建

    是德科技(NYSE:KEYS)推出Keysight AI (KAI)數(shù)據(jù)中心構(gòu)建,這是一款先進(jìn)的軟件套件,通過模擬真實(shí)工作負(fù)載來評估新算法、組件和協(xié)議對
    的頭像 發(fā)表于 04-07 11:06 ?355次閱讀

    適用于數(shù)據(jù)中心AI時(shí)代的800G網(wǎng)絡(luò)

    和性能隔離能力,以保障不同用戶任務(wù)互不干擾。 分布式AI計(jì)算與網(wǎng)絡(luò)架構(gòu)設(shè)計(jì) 分布式計(jì)算已成為AI訓(xùn)練的主流方式,通過將工作負(fù)載分配到多個(gè)GPU節(jié)點(diǎn)并行處理,以加速模型訓(xùn)練。這對數(shù)據(jù)中
    發(fā)表于 03-25 17:35

    Cadence 利用 NVIDIA Grace Blackwell 加速AI驅(qū)動的工程設(shè)計(jì)和科學(xué)應(yīng)用

    融合設(shè)計(jì)專業(yè)知識與加速計(jì)算,推動科技創(chuàng)新、實(shí)現(xiàn)能效和工程生產(chǎn)力方面的突破性進(jìn)展,引領(lǐng)全球生活新范式 內(nèi)容提要 ●?Cadence 借助 NVIDIA 最新 Blackwell 系統(tǒng),將
    的頭像 發(fā)表于 03-24 10:14 ?542次閱讀

    FPGA+AI王炸組合如何重塑未來世界:看看DeepSeek東方神秘力量如何預(yù)測......

    FPGA的硬件加速能力處理傳感數(shù)據(jù)。? 低功耗設(shè)計(jì):針對邊緣設(shè)備和物聯(lián)網(wǎng)應(yīng)用,開發(fā)低功耗的FPGA解決方案,以滿足嚴(yán)格的功耗限制。 4.借助
    發(fā)表于 03-03 11:21

    數(shù)據(jù)中心中的FPGA硬件加速器

    ? 再來看一篇FPGA的綜述,我們都知道微軟包括國內(nèi)的云廠商其實(shí)都在數(shù)據(jù)中心的服務(wù)中部署了FPGA,所以這篇論文就以數(shù)據(jù)中心的視角,來看下FPGA這個(gè)硬件加速器。 還是一樣,想要論文
    的頭像 發(fā)表于 01-14 10:29 ?437次閱讀
    <b class='flag-5'>數(shù)據(jù)中心</b>中的FPGA硬件<b class='flag-5'>加速器</b>

    從版本控制到全流程支持:揭秘Helix Core如何成為您的創(chuàng)意加速器

    加速器
    龍智DevSecOps
    發(fā)布于 :2024年11月26日 13:42:47

    NVIDIA加速AI在日本各行各業(yè)的應(yīng)用

    企業(yè)借助基于 NVIDIA AI Enterprise 與 Omniverse 工業(yè) AI 構(gòu)建的創(chuàng)新中心和服務(wù)
    的頭像 發(fā)表于 11-19 15:45 ?564次閱讀

    日本企業(yè)借助NVIDIA產(chǎn)品加速AI創(chuàng)新

    日本領(lǐng)先企業(yè)和大學(xué)正在使用 NVIDIA NeMo、NIM 微服務(wù)和 NVIDIA Isaac 加速 AI 創(chuàng)新。
    的頭像 發(fā)表于 11-19 14:34 ?732次閱讀

    【xG24 Matter開發(fā)套件試用體驗(yàn)】深入了解Silicon Labs xG24 Matter開發(fā)套件

    -使用Silicon Labs xG24開發(fā)套件支持智能加速器以構(gòu)建聲音感知門鎖”(Creating a Smarthome Device That Is Truly Smart - Building
    發(fā)表于 08-27 20:23

    適用于數(shù)據(jù)中心應(yīng)用中的硬件加速器的直流/直流轉(zhuǎn)換解決方案

    電子發(fā)燒友網(wǎng)站提供《適用于數(shù)據(jù)中心應(yīng)用中的硬件加速器的直流/直流轉(zhuǎn)換解決方案.pdf》資料免費(fèi)下載
    發(fā)表于 08-26 09:38 ?0次下載
    適用于<b class='flag-5'>數(shù)據(jù)中心</b>應(yīng)用中的硬件<b class='flag-5'>加速器</b>的直流/直流轉(zhuǎn)換<b class='flag-5'>器</b>解決方案

    【xG24 Matter開發(fā)套件試用體驗(yàn)】初識xG24 Matter開發(fā)套件

    。 借助高性能 2.4 GHz RF、低電流消耗、人工智能 (AI)/機(jī)器學(xué)習(xí) (ML) 硬件加速器和 Secure Vault 等關(guān)鍵功能,物聯(lián)網(wǎng)設(shè)備制造商可以打造智能、強(qiáng)大、節(jié)能且能夠避免遠(yuǎn)程
    發(fā)表于 07-11 23:31

    “白地板”方案,智算中心加速器

    明德源能白地板方案,智算中心加速器
    的頭像 發(fā)表于 06-21 11:54 ?1033次閱讀

    八大科技巨頭攜手推進(jìn)UALink,加速數(shù)據(jù)中心AI互聯(lián)

    近日,英特爾、Google、微軟、Meta等八家科技巨頭宣布共同成立超加速器鏈接(UALink)推廣小組,致力于推動數(shù)據(jù)中心內(nèi)AI加速器芯片的連接組件發(fā)展。UALink旨在優(yōu)化
    的頭像 發(fā)表于 05-31 10:59 ?1052次閱讀

    美國限制向中東AI加速器出口,審查國家安全

    AI加速器能協(xié)助數(shù)據(jù)中心處理大量人工智能聊天機(jī)器人和其他工具的開發(fā)信息。如今,它們已然成為構(gòu)建AI基礎(chǔ)設(shè)施的企業(yè)和政府的必需品。
    的頭像 發(fā)表于 05-31 09:20 ?885次閱讀