一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

關(guān)于大數(shù)據(jù)的數(shù)學(xué)基礎(chǔ)和大數(shù)據(jù)的利弊分析

獨(dú)愛72H ? 來源:網(wǎng)絡(luò)整理 ? 作者:佚名 ? 2020-04-13 17:58 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

(文章來源:網(wǎng)絡(luò)整理)

什么是數(shù)據(jù)?數(shù)據(jù)有狹義和廣義之分。狹義的數(shù)據(jù)就是我們說的一些數(shù)字,比如我們學(xué)習(xí)過程中的物理、化學(xué)等實(shí)驗(yàn)數(shù)據(jù),國家GDP等各種統(tǒng)計(jì)數(shù)據(jù)。廣義的數(shù)據(jù)包括任意形式的信息,比如我們每個(gè)人的個(gè)人的姓名、年齡、家庭情況、學(xué)歷等基本信息,還包括我們所能記錄和查詢的所有信息,如圖紙、視頻、音頻等。

我們所要談?wù)摰氖菑V義上的數(shù)據(jù)。數(shù)據(jù)不僅在科學(xué)研究中,而且在生活的方方面面都很重要,它已經(jīng)成為我們?nèi)粘Q策的重要依據(jù)。數(shù)據(jù)可以說伴隨真我們的一生。遠(yuǎn)古時(shí)代的結(jié)繩記事等就是最原始的數(shù)據(jù)傳遞方式。人類的文明與進(jìn)步,從某種意義上講是通過對(duì)數(shù)進(jìn)行收集、處理和總結(jié)而達(dá)成的。

“大數(shù)據(jù)”是怎么一回事呢?它就是我們字面意思理解的“大量的數(shù)據(jù)”嗎?如果不是,這兩者又有什么聯(lián)系和區(qū)別呢?大數(shù)據(jù)是隨著信息技術(shù)的發(fā)展而興起的,當(dāng)數(shù)據(jù)的計(jì)算和存儲(chǔ)不再是問題時(shí),人們發(fā)現(xiàn)超大量的數(shù)據(jù)會(huì)給我們決策帶來驚喜,這才有了更多的人研究和應(yīng)用大數(shù)據(jù)。

首先,大數(shù)據(jù)的數(shù)據(jù)量肯定是非常大的,但光是量大還不能稱之為大數(shù)據(jù)。比如我們做結(jié)構(gòu)有限元分析的實(shí)驗(yàn)數(shù)據(jù),往往計(jì)算過程就需要幾天甚至幾周,數(shù)據(jù)量也很大,但是不能算是大數(shù)據(jù)。大數(shù)據(jù)對(duì)數(shù)據(jù)最基本的要求是數(shù)據(jù)的多維度和完備性,要將原本看似毫無聯(lián)系的事物聯(lián)系起來,達(dá)到對(duì)事物全方位的完整描述,以便做出更科學(xué)的決策。

與數(shù)據(jù)相比,大數(shù)據(jù)的核心就是大數(shù)據(jù)是對(duì)收集掌握的各個(gè)維度的數(shù)據(jù)的再處理和分析。沒有經(jīng)過科學(xué)收集和處理的數(shù)據(jù)只是客觀存在,大數(shù)據(jù)可以理解為是一種決策能力的體現(xiàn)。

大數(shù)據(jù)(big data,mega data)或稱巨量資料,指的是需要新處理模式才能具有更強(qiáng)的決策力、洞察力和流程優(yōu)化能力的海量、高增長率和多樣化的信息資產(chǎn)。 在維克托·邁爾-舍恩伯格及肯尼斯·庫克耶編寫的《大數(shù)據(jù)時(shí)代》中大數(shù)據(jù)指不用隨機(jī)分析法(抽樣調(diào)查)這樣的捷徑,而采用所有數(shù)據(jù)進(jìn)行分析處理。大數(shù)據(jù)的5V特點(diǎn):Volume(大量)、Velocity(高速)、Variety(多樣)、Value(價(jià)值密度)、Veracity(真實(shí)性)。

理解了數(shù)據(jù)和大數(shù)據(jù)的聯(lián)系和區(qū)別后,我們?cè)賮砜纯从蓴?shù)據(jù)到大數(shù)據(jù)應(yīng)用過程和數(shù)學(xué)基礎(chǔ)。有了數(shù)據(jù)之后,如何科學(xué)地使用數(shù)據(jù),就要用到一門應(yīng)用科學(xué)——統(tǒng)計(jì)學(xué)。

非數(shù)學(xué)專業(yè)在大學(xué)有一門課程叫《概率和統(tǒng)計(jì)》,但其實(shí)概率論和統(tǒng)計(jì)學(xué)雖然緊密相連,卻是獨(dú)立發(fā)展的。概率論是研究隨機(jī)現(xiàn)象數(shù)量規(guī)律的數(shù)學(xué)分支;統(tǒng)計(jì)學(xué)是通過收集、整理、分析數(shù)據(jù)等手段,通過特定的數(shù)學(xué)模型和數(shù)學(xué)計(jì)算,以用來推測(cè)所測(cè)對(duì)象的本質(zhì),甚至預(yù)測(cè)對(duì)象未來的一門綜合性科學(xué)。

比如我們?cè)谏掀恼轮杏懻摰?a href="http://www.www27dydycom.cn/v/tag/150/" target="_blank">人工智能,數(shù)字人工智能中,如果沒有足夠多的數(shù)據(jù)供機(jī)器深度學(xué)習(xí),得到的結(jié)果就會(huì)有很大的不確定性,那它跟仿生人工智能相比就不會(huì)有很大的進(jìn)步。為什么數(shù)據(jù)要足夠大且全面呢?舉個(gè)簡(jiǎn)單的例子。

我們現(xiàn)在對(duì)著馬路上的車輛進(jìn)行統(tǒng)計(jì),主要對(duì)國產(chǎn)和進(jìn)口兩個(gè)數(shù)據(jù)維度進(jìn)行統(tǒng)計(jì)。如果半個(gè)小時(shí)之內(nèi),過去了100輛車,其中50臺(tái)進(jìn)口車,我們不能說進(jìn)口車已經(jīng)占50%,顯然這個(gè)結(jié)論是有非常大的誤差的。我們以這個(gè)調(diào)查來對(duì)但假如我們改變數(shù)據(jù)來源和數(shù)據(jù)的統(tǒng)計(jì)維度,從國家層面的車管所收集數(shù)據(jù),比如2018年進(jìn)口車占銷量的4%,這個(gè)數(shù)據(jù)對(duì)企業(yè)決策就有比較大的參考意義。

這個(gè)例子比較特殊。如果數(shù)據(jù)具有代表性,統(tǒng)計(jì)量又足夠,統(tǒng)計(jì)維度又比較科學(xué),那么從這些數(shù)據(jù)中得到的統(tǒng)計(jì)結(jié)果,對(duì)我們的工作和生活就有意義,不然充其量就是大量的數(shù)據(jù),而失去了數(shù)據(jù)存在的意義。

目前,大數(shù)據(jù)已經(jīng)在我們生活中起著巨大的作用。政府層面:宏觀經(jīng)濟(jì)調(diào)控、公共衛(wèi)生安全防范、社會(huì)輿論監(jiān)督、智慧交通管理;生活方面:醫(yī)療疾病風(fēng)險(xiǎn)跟蹤、公司運(yùn)營成本節(jié)省、售后服務(wù)質(zhì)量提升、運(yùn)輸車輛的故障險(xiǎn)情以提前預(yù)警維修、用戶商品推薦和服務(wù)、個(gè)人旅游、二手市場(chǎng)買賣等等。

毫不夸張地說,大數(shù)據(jù)創(chuàng)造了一種新的生活和商業(yè)模式,給人們提供了前所未有的便捷,甚至在網(wǎng)絡(luò)政務(wù)方面創(chuàng)造眾多奇跡。大數(shù)據(jù)已經(jīng)被當(dāng)作一種核心資產(chǎn)和商業(yè)模式,被不同程度地進(jìn)行著挖掘,隨之帶來了個(gè)人隱私和安全問題。

你剛剛搜索一個(gè)關(guān)鍵詞,比如“手表”,你的瀏覽器甚至一些應(yīng)用APP就開始頻繁地向你推薦各類手表廣告信息,難道你的手機(jī)這么懂你的“心思”?當(dāng)然不是,你剛剛的搜索信息被收集并馬上被應(yīng)用到你的手機(jī)上了。是不是有點(diǎn)赤裸裸的感覺!個(gè)人信息安全相關(guān)法律法規(guī)亟需出臺(tái)。大數(shù)據(jù)既帶來了創(chuàng)新,也帶來了挑戰(zhàn),數(shù)據(jù)的應(yīng)用需要有一定的約束,需要相關(guān)法律法規(guī)進(jìn)行有效地引導(dǎo)和管理。
(責(zé)任編輯:fqj)

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    更改最大數(shù)據(jù)包大小時(shí)無法識(shí)別USB設(shè)備如何解決?

    將生產(chǎn)者 EP 端點(diǎn)描述符中的最大數(shù)據(jù)包大小從 1024 字節(jié)更改為 512 字節(jié)時(shí),無法識(shí)別 USB 設(shè)備。 請(qǐng)告知如何解決這個(gè)問題。
    發(fā)表于 05-20 08:13

    大數(shù)據(jù)與云計(jì)算是干嘛的?

    大數(shù)據(jù)與云計(jì)算是支撐現(xiàn)代數(shù)字化技術(shù)的兩大核心。大數(shù)據(jù)專注于海量數(shù)據(jù)的采集、存儲(chǔ)、分析與價(jià)值挖掘;云計(jì)算通過虛擬化資源池提供彈性計(jì)算、存儲(chǔ)及服務(wù)能力。兩者結(jié)合,共同賦能企業(yè)決策、業(yè)務(wù)創(chuàng)新
    的頭像 發(fā)表于 02-20 14:48 ?637次閱讀

    大數(shù)據(jù)云計(jì)算都需要考什么證書?

    大數(shù)據(jù)和云計(jì)算領(lǐng)域包含多種專業(yè)證書,其中大數(shù)據(jù)領(lǐng)域涵蓋數(shù)據(jù)分析類證書、大數(shù)據(jù)工程類證書、數(shù)據(jù)治理類證書。云計(jì)算領(lǐng)域領(lǐng)域涵蓋云計(jì)算技術(shù)類證書、
    的頭像 發(fā)表于 02-19 11:05 ?654次閱讀

    工程大數(shù)據(jù)平臺(tái)

    由于無人駕駛系統(tǒng)開發(fā)需要長期迭代優(yōu)化,其過程需要大量的路試數(shù)據(jù)支撐,經(jīng)緯恒潤針對(duì)無人駕駛系統(tǒng)持續(xù)運(yùn)營和持續(xù)迭代的需求,開發(fā)并在云端部署了車路云工程大數(shù)據(jù)平臺(tái),依托5G網(wǎng)絡(luò),具有遠(yuǎn)程數(shù)據(jù)采集、壓縮、傳輸、解析、回放與算法無縫銜接等
    的頭像 發(fā)表于 01-10 17:00 ?591次閱讀
    工程<b class='flag-5'>大數(shù)據(jù)</b>平臺(tái)

    緩存對(duì)大數(shù)據(jù)處理的影響分析

    緩存對(duì)大數(shù)據(jù)處理的影響顯著且重要,主要體現(xiàn)在以下幾個(gè)方面: 一、提高數(shù)據(jù)訪問速度 在大數(shù)據(jù)環(huán)境中,數(shù)據(jù)存儲(chǔ)通常采用分布式存儲(chǔ)系統(tǒng),數(shù)據(jù)量龐大
    的頭像 發(fā)表于 12-18 09:45 ?777次閱讀

    大數(shù)據(jù)的3V、4V、7V,到底是什么意思?

    大數(shù)據(jù),顧名思義,就是大量的數(shù)據(jù)。更專業(yè)來說,大數(shù)據(jù),是一種規(guī)模大到在獲取、存儲(chǔ)、管理、分析方面大大超出了傳統(tǒng)數(shù)據(jù)軟件工具能力范圍的
    的頭像 發(fā)表于 12-06 01:01 ?1362次閱讀
    <b class='flag-5'>大數(shù)據(jù)</b>的3V、4V、7V,到底是什么意思?

    ADS1675最大數(shù)據(jù)吞吐率是是多少?

    ADS1675 24bit的ADC的采樣率最大是4Msps,請(qǐng)問這款adc的最大數(shù)據(jù)吞吐率是是多少?怎么算的,在datasheet中有明確寫出來嗎
    發(fā)表于 11-28 07:56

    raid 在大數(shù)據(jù)分析中的應(yīng)用

    RAID(Redundant Array of Independent Disks,獨(dú)立磁盤冗余陣列)在大數(shù)據(jù)分析中的應(yīng)用主要體現(xiàn)在提高存儲(chǔ)系統(tǒng)的性能、可靠性和容量上。以下是RAID在大數(shù)據(jù)分析
    的頭像 發(fā)表于 11-12 09:44 ?730次閱讀

    人工智能云計(jì)算大數(shù)據(jù)三者關(guān)系

    人工智能、云計(jì)算與大數(shù)據(jù)之間的關(guān)系是緊密相連、相互促進(jìn)的。大數(shù)據(jù)為人工智能提供了豐富的訓(xùn)練資源和驗(yàn)證環(huán)境;云計(jì)算為大數(shù)據(jù)和人工智能提供了強(qiáng)大的支撐平臺(tái);而人工智能則通過智能化應(yīng)用推動(dòng)了大數(shù)據(jù)
    的頭像 發(fā)表于 11-06 10:03 ?1017次閱讀

    emc技術(shù)在大數(shù)據(jù)分析中的角色

    在當(dāng)今這個(gè)數(shù)據(jù)驅(qū)動(dòng)的世界中,大數(shù)據(jù)分析已經(jīng)成為企業(yè)獲取洞察力、優(yōu)化業(yè)務(wù)流程和提高競(jìng)爭(zhēng)力的關(guān)鍵工具。隨著數(shù)據(jù)量的爆炸性增長,企業(yè)面臨著如何有效存儲(chǔ)、處理和分析這些
    的頭像 發(fā)表于 11-01 15:22 ?688次閱讀

    智慧城市與大數(shù)據(jù)的關(guān)系

    的建設(shè)需要對(duì)海量的數(shù)據(jù)資源進(jìn)行收集、整合、存儲(chǔ)與分析大數(shù)據(jù)技術(shù)的應(yīng)用,如智能感知、分布式存儲(chǔ)等,使得這些數(shù)據(jù)能夠被高效地處理和利用。 決策支持 : 在智慧城市的建設(shè)和運(yùn)行過程中,
    的頭像 發(fā)表于 10-24 15:27 ?1335次閱讀

    云計(jì)算在大數(shù)據(jù)分析中的應(yīng)用

    云計(jì)算在大數(shù)據(jù)分析中的應(yīng)用廣泛且深入,它為用戶提供了存儲(chǔ)、計(jì)算、分析和預(yù)測(cè)的強(qiáng)大能力。以下是對(duì)云計(jì)算在大數(shù)據(jù)分析中應(yīng)用的介紹: 一、存儲(chǔ)和處理海量數(shù)據(jù) 云計(jì)算提供了強(qiáng)大的存儲(chǔ)和計(jì)算能力
    的頭像 發(fā)表于 10-24 09:18 ?1133次閱讀

    IP 地址大數(shù)據(jù)分析如何進(jìn)行網(wǎng)絡(luò)優(yōu)化?

    一、大數(shù)據(jù)分析在網(wǎng)絡(luò)優(yōu)化中的作用 1.流量分析 大數(shù)據(jù)分析可以對(duì)網(wǎng)絡(luò)中的流量進(jìn)行實(shí)時(shí)監(jiān)測(cè)和分析,了解網(wǎng)絡(luò)的使用情況和流量趨勢(shì)。通過對(duì)流量數(shù)據(jù)
    的頭像 發(fā)表于 10-09 15:32 ?579次閱讀
    IP 地址<b class='flag-5'>大數(shù)據(jù)分析</b>如何進(jìn)行網(wǎng)絡(luò)優(yōu)化?

    基于Kepware的Hadoop大數(shù)據(jù)應(yīng)用構(gòu)建-提升數(shù)據(jù)價(jià)值利用效能

    處理超大數(shù)據(jù)集。 Hadoop的生態(tài)系統(tǒng)非常豐富,包括許多相關(guān)工具和技術(shù),如Hive、Pig、HBase等,這些工具可以方便地構(gòu)建復(fù)雜的大數(shù)據(jù)應(yīng)用。Hadoop廣泛應(yīng)用于各種場(chǎng)景,包括數(shù)據(jù)處理和
    的頭像 發(fā)表于 10-08 15:12 ?358次閱讀
    基于Kepware的Hadoop<b class='flag-5'>大數(shù)據(jù)</b>應(yīng)用構(gòu)建-提升<b class='flag-5'>數(shù)據(jù)</b>價(jià)值利用效能

    使用CYW20829的BLE進(jìn)行最大數(shù)據(jù)發(fā)送應(yīng)用,BLE丟失數(shù)據(jù)如何解決?

    我目前正在使用 CYW20829 的 BLE 進(jìn)行最大數(shù)據(jù)發(fā)送應(yīng)用,我使用的是 FREERTOS(例程 Bluetooth_LE_GATT_Throughput_Server 是我的參考),藍(lán)牙被
    發(fā)表于 07-23 07:56