一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

強勢應對海量數(shù)據(jù),內(nèi)存分析放大招

5RJg_mcuworld ? 來源:lp ? 2019-04-15 13:50 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

只聞其名,不見其形,從小聽到大的”黑洞“,終于讓我們在有生之年見到了它的真容,只能說幽暗的宇宙美麗也調(diào)皮,長久以來人類關(guān)于黑洞的探索,在這一刻終于得到影像印證。相信很多人心中都有一個疑惑,為黑洞拍張照片需要兩年時間?究其原因一個字“難”!難在哪?“數(shù)據(jù)”!

首先,望遠鏡觀測到的數(shù)據(jù)量非常龐大,2017年時8個望遠鏡的數(shù)據(jù)量達到了10PB,2018年又增加了格陵蘭島望遠鏡,龐大的數(shù)據(jù)量讓數(shù)據(jù)處理的難度不斷加大,且在數(shù)據(jù)處理的過程當中還伴隨著不少技術(shù)難題。

這張“沖洗”出的照片,蘊含著復雜的后期數(shù)據(jù)處理分析,而這一過程中涉及的數(shù)據(jù)量之多,處理難度之大都是前所未有的。那有沒有辦法,盡快揭開宇宙神秘的面紗?有沒有辦法,在面對龐大數(shù)據(jù)量的時候,我們有更高效快捷的方式去處理它們呢?

強勢應對海量數(shù)據(jù) 內(nèi)存分析放大招

就拿一張小小的黑洞照片來說,它背后的數(shù)據(jù)量需要一萬塊500GB硬盤才能裝滿,而這一萬塊硬盤高達半噸之重,這么”重“的數(shù)據(jù),分析起來已經(jīng)夠難,還想要快速分析那更是難上加難!龐大的數(shù)據(jù)量不應該成為人類進步的絆腳石,恰恰相反,將其中蘊含的價值挖掘出來,我們將擁有無限寶貴資源。

根據(jù)IDC預測,到2025年,全球數(shù)據(jù)量將從2018年的33ZB增加到175ZB,隨著接入大容量數(shù)據(jù)能力的提高,從這些數(shù)據(jù)中提取價值的需求勢必也在提升。而這也意味著我們了更廣泛的工具選擇,其中內(nèi)存分析就是一個絕好的工具,那么它在處理海量數(shù)據(jù)時到底有多靠譜?

首先,顧名思義,內(nèi)存分析就是將數(shù)據(jù)在存儲層向上移動,使其更接近CPU,以便加快內(nèi)存訪問速度以更快地進行分析,并縮短獲取洞察的時間。所以,倘若那半噸重的數(shù)據(jù),運用內(nèi)存分析或許我們就不會等那么久了。

內(nèi)存分析的優(yōu)勢可不少,其中包括降低IT成本、簡化基礎(chǔ)設施、延長運行時間、降低時延、優(yōu)化數(shù)據(jù)同步、減少數(shù)據(jù)副本以及縮短開發(fā)周期。此外,更快速地提供大量更深入的實時洞察,從而幫助創(chuàng)造新的機會,以推動和增強服務交付。

光說不練假把式 應用案例來一遍

內(nèi)存分析如此強大,在助力臨床醫(yī)療、零售業(yè)、金融服務業(yè)、智能運營供應鏈、呼叫中心和客戶流失方面都已全面落地,并表現(xiàn)出色。下面我們就來看看運用內(nèi)存分析解決行業(yè)痛點的兩個真實案例,一睹其風采。

全球領(lǐng)先的專業(yè)化學品公司Evonik,致力于實現(xiàn)總體擁有成本(TCO)效率的進一步提升,經(jīng)過精挑細選,最后采用了內(nèi)存分析方法解決了實際工作中遇到的難題。現(xiàn)在Evonik可以靈活并更高效地將數(shù)據(jù)集集成到其SAPHANA*平臺中,并做好存儲大容量數(shù)據(jù)集的準備。除此之外,一家提供全國廣告產(chǎn)品的ZypMedia公司,借助內(nèi)存分析確保了每秒處理大約500,000個事務請求,響應時間低至半毫秒,憑借速度和靈活性提供這種高質(zhì)量服務。

深入了解內(nèi)存分析傳統(tǒng)架構(gòu)已力不從心

內(nèi)存分析已經(jīng)在如此多的場景順利落地,并幫助企業(yè)巧妙化解行業(yè)難題,相信好奇的寶寶們心中已經(jīng)有了一個疑問,如此強大的內(nèi)存分析,需求一定少不了,這對于IT負責人來說挑戰(zhàn)可不小,因為他們需要從更大的數(shù)據(jù)集中提取更多價值。此時,不得不考慮他們所采用的架構(gòu)能否支持內(nèi)存運營,以及如何滿足目前和將來的需求。

由于架構(gòu)方面的需求基本取決于組織的能力和經(jīng)驗,而傳統(tǒng)的架構(gòu)可能會使用運營數(shù)據(jù)庫來存儲和管理當前數(shù)據(jù),在將這些數(shù)據(jù)發(fā)送到組織數(shù)據(jù)倉庫進行分析前,需要先對其進行批處理。然而,在許多企業(yè)中,這一模式正在逐漸被單一混合事務和分析處理架構(gòu)取代,如此一來,便可以為一些受益于內(nèi)存分析的關(guān)鍵平臺和應用提供支持。而如果考慮采用HTAP,則需要考慮哪種形式更適合當前業(yè)務。然而,內(nèi)涵式HTAP則更進了一步,其將分析功能嵌入事務本身以影響其結(jié)果。

不難發(fā)現(xiàn),更高的工作需求,要求我們必須采用支持實時數(shù)據(jù)處理和分析的IT基礎(chǔ)設施。那么,到底有沒有一種架構(gòu)可以完美支持所需內(nèi)存運行,并能夠滿足目前和將來的需求呢?答案來了,上面提到的化學公司正是借助了英特爾?傲騰TM數(shù)據(jù)中心級持久內(nèi)存,改善了實際性能和總體擁有成本;而廣告產(chǎn)品公司則借助英特爾?至強?可擴展處理器,實現(xiàn)了動態(tài)廣告投放。

而這一切都要歸功于英特爾?至強?平臺構(gòu)建內(nèi)存分析堆棧,讓采集和處理大容量數(shù)據(jù)能力大大提升,已達到幫助行業(yè)實時甚至提前識別趨勢與洞察并做出響應。由此可見,存儲和內(nèi)存方面的創(chuàng)新型產(chǎn)品,確實將困擾我們的數(shù)據(jù)難題快速解決消化,不信你接著看,適用于數(shù)據(jù)中心的英特爾?傲騰TM固態(tài)盤,其采用非易失性內(nèi)存技術(shù),可提供類似DRAM的性能并具有固態(tài)盤存儲的持久性。為了推進這一變革,英特爾?傲騰TM數(shù)據(jù)中心級持久內(nèi)存,配備全新一代的英特爾?至強?可擴展處理器,將此優(yōu)勢與CPU內(nèi)存總線直接結(jié)合。這樣一來,可更好地兼顧高容量、經(jīng)濟性和持久性。

極簡內(nèi)存分析助力數(shù)據(jù)資源價值最大化

數(shù)據(jù)處理能力永遠趕不上生成數(shù)據(jù)的速度,因此,必須將數(shù)據(jù)戰(zhàn)略的重點放在充分發(fā)揮數(shù)據(jù)資源的價值上,那么如何將好鋼用在刀刃上呢?為簡化內(nèi)存分析,英特爾不僅設計并優(yōu)化了一系列數(shù)據(jù)中心技術(shù),用以加快數(shù)據(jù)驅(qū)動型洞察,還在存儲架構(gòu)上做了不小的文章,使得內(nèi)存容量超出DRAM限制,更好地兼顧性能和成本。如此一來,就可以提供內(nèi)存分析工作負載通常所需的快速可擴展性和靈活性。除了持續(xù)致力于硬件創(chuàng)新外,它們開發(fā)了通過基準測試且完全集成的軟件和硬件堆棧,支持特定工作負載,縮短服務交付時間和上市時間。

內(nèi)存數(shù)據(jù)庫已不單單是面向特殊分析工作負載的一種昂貴方案,而是在向著實現(xiàn)更廣泛的目標轉(zhuǎn)變。從人類生活到行業(yè)應用,甚至到宇宙探索,人類數(shù)據(jù)正以指數(shù)級增長,面對海量數(shù)據(jù),如何充分發(fā)揮數(shù)據(jù)資源價值,基于英特爾?至強?平臺構(gòu)建的內(nèi)存分析堆棧給了我們最好的答案。當然我們也相信,未來英特爾將會有更多的創(chuàng)新與探索,為企業(yè)數(shù)據(jù)帶來革新的同時,創(chuàng)造無限可能性。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 數(shù)據(jù)
    +關(guān)注

    關(guān)注

    8

    文章

    7256

    瀏覽量

    91871
  • 內(nèi)存
    +關(guān)注

    關(guān)注

    8

    文章

    3125

    瀏覽量

    75270
  • 架構(gòu)
    +關(guān)注

    關(guān)注

    1

    文章

    528

    瀏覽量

    25986

原文標題:一張“黑洞”需要拍兩年?有了它或許就不會讓大家等那么久了

文章出處:【微信號:mcuworld,微信公眾號:嵌入式資訊精選】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    運算放大器積分電路分析

    運算放大器積分電路圖 積分運算電路的分析方法與加法電路差不多,反相積分運算電路如圖1所示。根據(jù)虛地有,于是由此可見,輸出電壓為輸入電壓對時間的積分,負號表明輸出電壓和輸入電壓在相位上是相反
    發(fā)表于 03-11 14:36

    應對海量數(shù)據(jù)挑戰(zhàn),如何基于Euro NCAP標準開展高效智駕測試與評估?

    自動駕駛技術(shù)快速發(fā)展,海量數(shù)據(jù)和復雜場景帶來性能與安全評估挑戰(zhàn)。如何高效管理數(shù)據(jù)、挖掘關(guān)鍵場景并滿足以Euro NCAP為代表的嚴格評估標準,成為行業(yè)核心問題。本文探討如何應對挑戰(zhàn),并
    的頭像 發(fā)表于 02-12 10:09 ?4062次閱讀
    <b class='flag-5'>應對</b><b class='flag-5'>海量</b><b class='flag-5'>數(shù)據(jù)</b>挑戰(zhàn),如何基于Euro NCAP標準開展高效智駕測試與評估?

    利用Minitab應對供應鏈中斷問題

    供應鏈中斷是不可避免的,但積極的措施和數(shù)據(jù)驅(qū)動的戰(zhàn)略可以減輕其影響。Minitab全面的數(shù)據(jù)分析和問題解決工具使組織能夠分析、優(yōu)化和調(diào)整其供應鏈,以應對不可預見的挑戰(zhàn),確保面對中斷時的
    的頭像 發(fā)表于 01-02 17:16 ?458次閱讀

    矚目!海量數(shù)據(jù)再獲2024年度openGauss社區(qū)突出貢獻單位

    12月27日,備受矚目的openGaussSummit2024在北京盛大舉行。本次峰會匯聚了數(shù)據(jù)庫行業(yè)的眾多精英與領(lǐng)袖,共同探討數(shù)據(jù)庫技術(shù)的最新進展與未來趨勢。海量數(shù)據(jù)作為openGa
    的頭像 發(fā)表于 12-30 10:09 ?504次閱讀
    矚目!<b class='flag-5'>海量</b><b class='flag-5'>數(shù)據(jù)</b>再獲2024年度openGauss社區(qū)突出貢獻單位

    康謀分享 | 如何應對ADAS/AD海量數(shù)據(jù)處理挑戰(zhàn)?

    如何有效處理ADAS/AD海量數(shù)據(jù)并從中獲得見解?IVEX數(shù)據(jù)處理流程可自動從原始傳感器數(shù)據(jù)等輸入中識別出值得關(guān)注的事件和場景,推動數(shù)據(jù)高效
    的頭像 發(fā)表于 12-25 10:05 ?3981次閱讀
    康謀分享 | 如何<b class='flag-5'>應對</b>ADAS/AD<b class='flag-5'>海量</b><b class='flag-5'>數(shù)據(jù)</b>處理挑戰(zhàn)?

    芯片的失效性分析應對方法

    老化的內(nèi)在機理,揭示芯片失效問題的復雜性,并提出針對性的應對策略,為提升芯片可靠性提供全面的分析與解決方案,助力相關(guān)行業(yè)在芯片應用中有效應對挑戰(zhàn),保障系統(tǒng)的高效穩(wěn)定
    的頭像 發(fā)表于 12-20 10:02 ?2388次閱讀
    芯片的失效性<b class='flag-5'>分析</b>與<b class='flag-5'>應對</b>方法

    數(shù)據(jù)可視化與數(shù)據(jù)分析的關(guān)系

    在當今這個信息爆炸的時代,數(shù)據(jù)無處不在。無論是企業(yè)運營、科學研究還是個人決策,我們都需要從海量數(shù)據(jù)中提取有價值的信息。數(shù)據(jù)分析數(shù)據(jù)可視化
    的頭像 發(fā)表于 12-06 17:09 ?964次閱讀

    DDR內(nèi)存數(shù)據(jù)傳輸速度的關(guān)系

    在計算機系統(tǒng)中,內(nèi)存是至關(guān)重要的組件之一,它直接影響到數(shù)據(jù)的處理速度和系統(tǒng)的響應時間。DDR內(nèi)存作為一種高效的內(nèi)存技術(shù),其數(shù)據(jù)傳輸速度是衡量
    的頭像 發(fā)表于 11-20 14:35 ?2380次閱讀

    WDS分布式存儲系統(tǒng)軟件助力電信工程海量數(shù)據(jù)存儲項目

    WDS分布式存儲系統(tǒng)軟件助力電信工程海量數(shù)據(jù)存儲項目
    的頭像 發(fā)表于 11-11 09:59 ?507次閱讀
    WDS分布式存儲系統(tǒng)軟件助力電信工程<b class='flag-5'>海量</b><b class='flag-5'>數(shù)據(jù)</b>存儲項目

    海量數(shù)據(jù)處理需要多少RAM內(nèi)存

    海量數(shù)據(jù)處理所需的RAM(隨機存取存儲器)內(nèi)存量取決于多個因素,包括數(shù)據(jù)的具體規(guī)模、處理任務的復雜性、數(shù)據(jù)庫管理系統(tǒng)的效率以及所使用軟件的優(yōu)
    的頭像 發(fā)表于 11-11 09:56 ?1299次閱讀

    Linux內(nèi)存泄露案例分析內(nèi)存管理分享

    作者:京東科技 李遵舉 一、問題 近期我們運維同事接到線上LB(負載均衡)服務內(nèi)存報警,運維同事反饋說LB集群有部分機器的內(nèi)存使用率超過80%,有的甚至超過90%,而且內(nèi)存使用率還再不停的增長。接到
    的頭像 發(fā)表于 10-24 16:14 ?1077次閱讀
    Linux<b class='flag-5'>內(nèi)存</b>泄露案例<b class='flag-5'>分析</b>和<b class='flag-5'>內(nèi)存</b>管理分享

    云計算在大數(shù)據(jù)分析中的應用

    云計算在大數(shù)據(jù)分析中的應用廣泛且深入,它為用戶提供了存儲、計算、分析和預測的強大能力。以下是對云計算在大數(shù)據(jù)分析中應用的介紹: 一、存儲和處理海量數(shù)
    的頭像 發(fā)表于 10-24 09:18 ?1132次閱讀

    邏輯內(nèi)存和物理內(nèi)存的區(qū)別

    邏輯內(nèi)存和物理內(nèi)存是計算機系統(tǒng)中兩個重要的概念,它們在計算機的運行和數(shù)據(jù)處理中起著至關(guān)重要的作用。 1. 物理內(nèi)存(Physical Memory) 物理
    的頭像 發(fā)表于 09-27 15:38 ?1778次閱讀

    放大電路的基本分析方法有哪兩種

    放大電路是電子學中的基礎(chǔ)組成部分,用于增強信號的幅度而不改變其基本特性。在電子工程中,放大電路的設計和分析是至關(guān)重要的。放大電路的基本分析
    的頭像 發(fā)表于 09-23 10:40 ?1205次閱讀

    放大電路的分析方法介紹

    放大電路是電子技術(shù)中非常重要的組成部分,它廣泛應用于信號處理、通信、測量等領(lǐng)域。對于放大電路的分析,通??梢苑譃橹绷?b class='flag-5'>分析和交流分析兩種情況。
    的頭像 發(fā)表于 08-07 10:08 ?1293次閱讀