一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

多源零拷貝技術在數(shù)據(jù)存儲中起到了怎樣的作用?

浪潮存儲 ? 來源:未知 ? 作者:工程師郭婷 ? 2018-08-05 10:50 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

在互聯(lián)網(wǎng)、云計算、AI、大數(shù)據(jù)等新智能應用驅動的新數(shù)據(jù)時代下,數(shù)據(jù)存儲作為一切其他數(shù)據(jù)行為的基礎,扮演著越來越重要的角色。浪潮軟件定義存儲AS13000通過模塊化定義的方式,基于多源零拷貝技術實現(xiàn)多應用高效共享一套存儲系統(tǒng),提高數(shù)據(jù)應用效率。

云計算、大數(shù)據(jù)、AI、物聯(lián)網(wǎng)等各種新智能應用不斷涌現(xiàn),帶來數(shù)據(jù)需求的改變。文件、對象等數(shù)據(jù)類型需求增多。一方面,傳統(tǒng)的文件系統(tǒng)存儲服務正被企業(yè)廣泛應用;另一方面,有著鮮明的互聯(lián)網(wǎng)、大數(shù)據(jù)時代特點對象存儲,也越來越受到互聯(lián)網(wǎng)用戶青睞。

每一種存儲分別對應不同的訪問協(xié)議,文件存儲主要操作對象是文件和文件夾,例如NFS協(xié)議;對象存儲協(xié)議則主要為S3、Swift。浪潮軟件定義存儲AS13000的優(yōu)勢即在于,通過模塊化定義的方式,實現(xiàn)了在同一存儲系統(tǒng)中可以同時支持文件、對象等多種存儲協(xié)議,讓用戶通過一套存儲系統(tǒng)即可支持企業(yè)各種應用訪問存儲數(shù)據(jù),大大節(jié)省TCO。

1什么是對象存儲?

對象存儲是一種新的采用扁平數(shù)據(jù)的組織形式,并提供基于HTTP協(xié)議的RESTful接口訪問的分布式存儲系統(tǒng)。它適用于一次寫入,多次讀取的非結構化數(shù)據(jù)存儲的需求場景,例如文檔、圖像、視頻等網(wǎng)絡媒體文件。在云計算與大數(shù)據(jù)時代,對象存儲發(fā)展迅猛。

不過,目前業(yè)界的同類存儲產品,每種存儲系統(tǒng)只能提供1種或2種存儲協(xié)議。對于新增對象存儲需求的用戶,這就要求在多應用環(huán)境中必須部署2套或2套以上的存儲系統(tǒng),無疑增加了用戶的初始投資,且增大了后期維護和管理的難度。

浪潮軟件定義存儲AS13000則通過所提供的多源零拷貝技術,實現(xiàn)了在線存儲和大數(shù)據(jù)分析存儲的統(tǒng)一融合。企業(yè)的各種應用在存取數(shù)據(jù)時,無需在存儲集群間進行數(shù)據(jù)拷貝,而是通過文件系統(tǒng)方便地訪問對象存儲的數(shù)據(jù),同時還可以高效實現(xiàn)大數(shù)據(jù)的分析和挖掘。

2對象存儲:通過多源零拷貝技術,共享一套存儲

多源零拷貝技術,是通過對NFS協(xié)議、HDFS文件協(xié)議和S3/Swift對象協(xié)議多種存儲協(xié)議的融合,來實現(xiàn)多應用存取數(shù)據(jù)共享一套存儲系統(tǒng)的先進技術。多源零拷貝技術既避免了數(shù)據(jù)在不同存儲之間來回拷貝的問題,又解決了用戶投資大、維護和管理難的問題。

多源零拷貝技術示意圖

浪潮軟件定義存儲AS13000之所以可以同時支持NFS、S3/Swift、HDFS(Hadoop分布式文件系統(tǒng))訪問底層對象存儲,是因為采用了以下技術:

AS13000基于DOS設計和實現(xiàn)S3/Swift接口。它在S3/Swift接口基礎上封裝FS適配器,實現(xiàn)了HDFS接口和NFS接口的對接,從而實現(xiàn)大數(shù)據(jù)應用程序和NFS應用程序對存儲系統(tǒng)的訪問。

AS13000的對象應用程序通過S3/Swift接口直接調用底層存儲系統(tǒng),從而實現(xiàn)對象應用程序對對象數(shù)據(jù)的上傳與下載。AS13000底層存儲是一個高可用、智能化的分布式對象存儲系統(tǒng),支持自修復、自管理等底層數(shù)據(jù)管理功能,它向上提供UDOS訪問函數(shù)庫,能夠支持DOS、DFS和DBS等模塊的訪問。3提高對象存儲數(shù)據(jù)訪問效率

浪潮軟件定義存儲AS13000提供的多源零拷貝技術,避免了企業(yè)不同業(yè)務應用數(shù)據(jù)在多存儲系統(tǒng)之間的拷貝,因此可以有效提升數(shù)據(jù)訪問效率,為多場景、多應用的“互聯(lián)網(wǎng)+”用戶帶來了優(yōu)勢。

浪潮軟件定義存儲AS13000在醫(yī)療領域慢病跟蹤私有云存儲場景的應用

目前,浪潮軟件定義存儲AS13000在各行各業(yè)已經有了廣泛應用。以醫(yī)療領域應用為例,AS13000已經應用于慢病跟蹤私有云存儲解決方案。系統(tǒng)的數(shù)據(jù)來源包括病人公有云監(jiān)測數(shù)據(jù)、電子病歷文件及數(shù)據(jù)庫、PACS影像數(shù)據(jù)等多種渠道,通過Storming,Spark等流式和批量數(shù)據(jù)分析和運算,將HBASE開源數(shù)據(jù)集存儲到AS13000中,然后通過慢病檔案等應用,對HBASE結果數(shù)據(jù)進行前端展示,提供輔助治療決策及建議。

浪潮軟件定義存儲AS13000存儲系統(tǒng)的優(yōu)勢在于,支持原生多種文件/對象協(xié)議接口, 通過一套存儲集群,適配多種場景多個應用,給醫(yī)院節(jié)省了硬件成本;與此同時,通過數(shù)據(jù)存儲融合,使得Spark、Storm讀取多源數(shù)據(jù)的效率提升,HBASE存儲數(shù)據(jù)效率也得到相應提升,從而提升了整個存儲系統(tǒng)的訪問效率。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 云計算
    +關注

    關注

    39

    文章

    7976

    瀏覽量

    139942
  • 互聯(lián)網(wǎng)

    關注

    55

    文章

    11247

    瀏覽量

    106303
  • 數(shù)據(jù)存儲

    關注

    5

    文章

    997

    瀏覽量

    51719
  • AI
    AI
    +關注

    關注

    88

    文章

    35041

    瀏覽量

    279053
  • 大數(shù)據(jù)

    關注

    64

    文章

    8959

    瀏覽量

    140092

原文標題:多源零拷貝,提升數(shù)據(jù)應用效率的核心技術

文章出處:【微信號:inspurstorage,微信公眾號:浪潮存儲】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    黑芝麻智能一芯拷貝共享內存技術:破解車載大數(shù)據(jù)傳輸效能困局

    通過 拷貝共享內存技術 ,黑芝麻智能解決車載域間大數(shù)據(jù)傳輸?shù)难舆t與資源消耗問題。核心技術包括
    發(fā)表于 06-23 17:53 ?911次閱讀
    黑芝麻智能一芯<b class='flag-5'>多</b>域<b class='flag-5'>零</b><b class='flag-5'>拷貝</b>共享內存<b class='flag-5'>技術</b>:破解車載大<b class='flag-5'>數(shù)據(jù)</b>傳輸效能困局

    嵌入式學習-飛凌嵌入式ElfBoard ELF 1板卡-內核空間與用戶空間的數(shù)據(jù)拷貝數(shù)據(jù)拷貝介紹

    copy_from_user(void *to, const void __user *from, unsigned long n);參數(shù)說明:to:目標緩沖區(qū)的指針,用于存儲數(shù)據(jù);from:緩沖區(qū)的指針,
    發(fā)表于 03-20 11:50

    飛凌嵌入式ElfBoard ELF 1板卡-內核空間與用戶空間的數(shù)據(jù)拷貝數(shù)據(jù)拷貝介紹

    , unsigned long n);參數(shù)說明:to:目標緩沖區(qū)的指針,用于存儲數(shù)據(jù);from:緩沖區(qū)的指針,數(shù)據(jù)的來源;n:要拷貝的字節(jié)
    發(fā)表于 03-19 08:55

    一文看懂!時鐘在數(shù)據(jù)采集系統(tǒng)究竟起到哪些關鍵作用?

    時鐘的基本概念 時鐘是數(shù)據(jù)采集系統(tǒng)的關鍵組件,負責提供同步信號并控制數(shù)據(jù)采集和轉換的時間間隔。時鐘信號可以由設備內部生成,也可以通過外部信號提供。時鐘的選擇會直接影響系統(tǒng)的穩(wěn)定性、
    的頭像 發(fā)表于 01-21 13:44 ?662次閱讀
    一文看懂!時鐘<b class='flag-5'>在數(shù)據(jù)</b>采集系統(tǒng)<b class='flag-5'>中</b>究竟<b class='flag-5'>起到</b>哪些關鍵<b class='flag-5'>作用</b>?

    字符串在數(shù)據(jù)存儲方式

    數(shù)據(jù)庫是現(xiàn)代信息技術存儲和管理數(shù)據(jù)的核心組件。字符串作為最常見的數(shù)據(jù)類型之一,
    的頭像 發(fā)表于 01-07 15:41 ?805次閱讀

    cmp在數(shù)據(jù)處理的應用 如何優(yōu)化cmp性能

    ,然后在多個處理器上并行處理,顯著提高了數(shù)據(jù)處理的速度和吞吐量。 1. CMP在大數(shù)據(jù)處理的應用 在大數(shù)據(jù)處理,CMP
    的頭像 發(fā)表于 12-17 09:27 ?1138次閱讀

    VSS在數(shù)據(jù)備份作用 VSS技術的優(yōu)勢與劣勢

    VSS在數(shù)據(jù)備份作用 1. 什么是VSS(Volume Shadow Copy Service)? VSS(Volume Shadow Copy Service)是微軟Windows操作系統(tǒng)
    的頭像 發(fā)表于 12-13 16:03 ?986次閱讀

    高效數(shù)據(jù)管理工具:PP-B2811硬盤母備份應用

    PP-B2811硬盤母備份技術,為醫(yī)療、金融和教育行業(yè)提供集中化數(shù)據(jù)管理解決方案。支持多種存儲設備,實現(xiàn)快速備份和
    的頭像 發(fā)表于 12-11 11:55 ?469次閱讀
    高效<b class='flag-5'>數(shù)據(jù)</b>管理工具:PP-B2811<b class='flag-5'>多</b>硬盤母<b class='flag-5'>源</b>備份應用

    批量音頻檔案拷貝最佳方案:解決播放錯誤與拷貝不完全問題

    本文討論了在數(shù)字化時代,專業(yè)SD拷貝機在批量拷貝音頻檔案至MicroSD卡的應用優(yōu)勢。相較于傳統(tǒng)計算機拷貝,SD
    的頭像 發(fā)表于 11-23 16:12 ?641次閱讀
    批量音頻檔案<b class='flag-5'>拷貝</b>最佳方案:解決播放錯誤與<b class='flag-5'>拷貝</b>不完全問題

    LLM在數(shù)據(jù)分析作用

    隨著大數(shù)據(jù)時代的到來,數(shù)據(jù)分析已經成為企業(yè)和組織決策的關鍵工具。數(shù)據(jù)科學家和分析師需要從海量數(shù)據(jù)中提取有價值的信息,以支持業(yè)務決策。在這個過程
    的頭像 發(fā)表于 11-19 15:35 ?1094次閱讀

    數(shù)據(jù)分析在數(shù)字化作用

    與重要性 數(shù)據(jù)分析是指使用統(tǒng)計和邏輯方法對數(shù)據(jù)進行處理和解釋的過程。它涉及到數(shù)據(jù)的收集、清洗、轉換、建模和解釋,目的是發(fā)現(xiàn)數(shù)據(jù)的模式、趨勢
    的頭像 發(fā)表于 10-27 17:35 ?1135次閱讀

    磁盤拷貝機會拷貝刪除的內容嗎

    磁盤拷貝機,也稱為硬盤克隆器或磁盤復制器,是一種用于復制硬盤驅動器內容的設備。它可以將一個硬盤上的所有數(shù)據(jù),包括操作系統(tǒng)、程序、文件和設置,復制到另一個硬盤上。這種設備在數(shù)據(jù)備份、系統(tǒng)遷移、硬盤
    的頭像 發(fā)表于 10-14 15:38 ?1283次閱讀

    觸發(fā)器在數(shù)字電路作用是什么

    觸發(fā)器在數(shù)字電路作用是極其重要且多方面的。作為一種具有記憶功能的電路元件,觸發(fā)器能夠存儲一位二進制信息(即0或1),并根據(jù)輸入信號和時鐘信號的變化,在不同狀態(tài)之間切換,從而實現(xiàn)各種
    的頭像 發(fā)表于 08-30 10:46 ?2621次閱讀

    半導體存儲在數(shù)據(jù)中心中的應用

    半導體存儲在數(shù)據(jù)中心中的應用是極其重要且廣泛的,它們不僅是數(shù)據(jù)中心存儲系統(tǒng)的核心組件,還直接關系到數(shù)據(jù)處理的效率、可靠性和安全性。以下將詳細闡述半導體
    的頭像 發(fā)表于 08-20 10:17 ?1284次閱讀

    LM3311腳在該電路具體起到什么作用?CF電容怎樣放電的?

    LM3311腳在該電路具體起到什么作用CF電容怎樣放電的
    發(fā)表于 08-13 07:51