一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線(xiàn)課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

怎樣在三個(gè)月內(nèi)成為大數(shù)據(jù)工程師

工程師人生 ? 來(lái)源:網(wǎng)絡(luò)整理 ? 作者:工程師吳畏 ? 2018-09-27 09:38 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

技術(shù)論壇中或知乎上,看到近幾萬(wàn)的朋友都在疑惑,學(xué)習(xí)Java應(yīng)該選擇什么發(fā)展方向,這個(gè)咱們?cè)谥暗奈恼轮杏刑岬竭^(guò),Java發(fā)展在領(lǐng)域上有三個(gè)選擇方向:

JavaEE,主要應(yīng)用于企業(yè)級(jí)應(yīng)用開(kāi)發(fā);安卓開(kāi)發(fā)方向;嵌入式應(yīng)用開(kāi)發(fā)方向。在此建議大家選擇JavaEE方向,因?yàn)閼?yīng)用非常廣泛,崗位設(shè)置也比較多。

但我們從來(lái)沒(méi)有討論過(guò)學(xué)習(xí)Java,難道這輩子就只能做Java后端開(kāi)發(fā)嗎?只能在這條路上奮斗到底嗎?難道中途沒(méi)有其他的選擇嗎?

偶然認(rèn)識(shí)的一個(gè)朋友,最開(kāi)始是從事Java后端開(kāi)發(fā)的,后來(lái)他在業(yè)余時(shí)間自學(xué)成功轉(zhuǎn)入大數(shù)據(jù)行業(yè),現(xiàn)在是一名大數(shù)據(jù)工程師,待遇也比之前好更多。前提是他是一名Java后端開(kāi)發(fā)。

大數(shù)據(jù)是我們?nèi)缃癖容^火的一個(gè)發(fā)展方向,但是很多培訓(xùn)機(jī)構(gòu)有提到幾個(gè)月速成的,小編覺(jué)得不是特別靠譜。

原因有以下:

大數(shù)據(jù)是一個(gè)新生行業(yè),還不太成熟。

Java發(fā)展了將近20年,也沒(méi)有說(shuō)幾個(gè)月速成的,最多也就是帶你入門(mén),讓你對(duì)Java的知識(shí)結(jié)構(gòu)體系有一個(gè)清晰的認(rèn)知,在后期的工作實(shí)踐期間成長(zhǎng)的速度更快。

大數(shù)據(jù)的起點(diǎn)要高,并不是所謂的零基礎(chǔ)就可以入門(mén)的。

我們接下來(lái)講述的有關(guān)大數(shù)據(jù)的學(xué)習(xí)是有條件限制的,首先你需要是一名普通的工程師,如果你是Java工程師的話(huà)更好,但如果你是小白的話(huà),那就只能成為一名工程師的后再來(lái)學(xué)習(xí)大數(shù)據(jù)吧。

一、認(rèn)識(shí)大數(shù)據(jù)

大數(shù)據(jù)本質(zhì)其實(shí)也是數(shù)據(jù),不過(guò)也包括了些新的特征,

數(shù)據(jù)來(lái)源廣;

數(shù)據(jù)格式多樣化(結(jié)構(gòu)化數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)、Excel文件等);

數(shù)據(jù)量大(最少也是TB級(jí)別的、甚至可能是PB級(jí)別);

數(shù)據(jù)增長(zhǎng)速度快。

而針對(duì)以上新的特征需要考慮很多問(wèn)題:

例如,數(shù)據(jù)來(lái)源廣,該如何采集匯總?采集匯總之后,又該存儲(chǔ)呢?數(shù)據(jù)存儲(chǔ)之后,該如何通過(guò)運(yùn)算轉(zhuǎn)化成自己想要的結(jié)果呢?

對(duì)于這些問(wèn)題,我們需要有相對(duì)應(yīng)的知識(shí)解決。

二、大數(shù)據(jù)所需技能要求

Python語(yǔ)言:編寫(xiě)一些腳本時(shí)會(huì)用到。

Scala語(yǔ)言:編寫(xiě)Spark程序的最佳語(yǔ)言,當(dāng)然也可以選擇用Python。

Ozzie,azkaban:定時(shí)任務(wù)調(diào)度的工具。

Hue,Zepplin:圖形化任務(wù)執(zhí)行管理,結(jié)果查看工具。

Allluxio,Kylin等:通過(guò)對(duì)存儲(chǔ)的數(shù)據(jù)進(jìn)行預(yù)處理,加快運(yùn)算速度的工具。

必須掌握的技能:

Java高級(jí)(虛擬機(jī)、并發(fā))、Linux 基本操作、Hadoop(HDFS+MapReduce+Yarn )、 HBase(JavaAPI操作+Phoenix )、Hive(Hql基本操作和原理理解)、 Kafka、Storm/JStorm、Scala、Python、Spark (Core+sparksql+Spark streaming ) 、輔助小工具(Sqoop/Flume/Oozie/Hue等)

高階技能6條:

機(jī)器學(xué)習(xí)算法以及mahout庫(kù)加MLlib、 R語(yǔ)言、Lambda 架構(gòu)、Kappa架構(gòu)、Kylin、Alluxio

三、學(xué)習(xí)規(guī)劃

每天需要有3個(gè)小時(shí)的學(xué)習(xí)時(shí)間,周末的時(shí)候需要10小時(shí),如果做不到的話(huà),只能是

第一階段(基礎(chǔ)階段)

Linux學(xué)習(xí)

Linux操作系統(tǒng)介紹與安裝、Linux常用命令、Linux常用軟件安裝、Linux網(wǎng)絡(luò)、 防火墻、Shell編程等。

Java 高級(jí)學(xué)習(xí)(《深入理解Java虛擬機(jī)》、《Java高并發(fā)實(shí)戰(zhàn)》)

掌握多線(xiàn)程、掌握并發(fā)包下的隊(duì)列、掌握J(rèn)VM技術(shù)、掌握反射和動(dòng)態(tài)代理、了解JMS。

Zookeeper學(xué)習(xí)

Zookeeper分布式協(xié)調(diào)服務(wù)介紹、Zookeeper集群的安裝部署、Zookeeper數(shù)據(jù)結(jié)構(gòu)、命令。

第二階段(攻堅(jiān)階段)

Hadoop、Hive、HBase、Scala、Spark、Python

第三階段(輔助工具工學(xué)習(xí)階段)

Sqoop、Flume、Oozie、Hue這些工具的學(xué)習(xí)主要在CSDN,51CTO以及官網(wǎng)都可以學(xué)習(xí)。

總結(jié)

在技術(shù)行業(yè)里面,每天都會(huì)有新的東西出現(xiàn),需要關(guān)注最新技術(shù)動(dòng)態(tài),不斷學(xué)習(xí)。任何一般技術(shù)都是先學(xué)習(xí)理論,然后在實(shí)踐中不斷完善理論的過(guò)程。

如果你覺(jué)得自己看書(shū)效率太慢,你可以網(wǎng)上搜集一些課程。

快速學(xué)習(xí)的能力、解決問(wèn)題的能力、溝通能力在這個(gè)行業(yè)是真的非常重要的指標(biāo)。

要善于使用StackOverFlow和Google來(lái)幫助你學(xué)習(xí)過(guò)程遇到的問(wèn)題。

視頻課程推薦:可以去萬(wàn)能的淘寶購(gòu)買(mǎi)一些視頻課程,你輸入“大數(shù)據(jù)視頻課程”,會(huì)出現(xiàn)很多,多購(gòu)買(mǎi)幾份(100塊以?xún)?nèi)可以搞定),然后選擇一個(gè)適合自己的。

以上是我們對(duì)大數(shù)據(jù)學(xué)習(xí)的總結(jié),當(dāng)然我們也提到了,并不是說(shuō)零基礎(chǔ)的就可以直接學(xué)習(xí),需要有編程的基礎(chǔ),要先掌握扎實(shí)的編程基礎(chǔ),在此建議學(xué)習(xí)Java,成為一名工程師的時(shí)候,有一定編程經(jīng)驗(yàn),自學(xué)起來(lái)也相對(duì)比開(kāi)始要簡(jiǎn)單一點(diǎn),然后對(duì)大數(shù)據(jù)有興趣或者想要進(jìn)入這個(gè)行業(yè)的就可以去學(xué)習(xí)了。

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 工程師
    +關(guān)注

    關(guān)注

    59

    文章

    1590

    瀏覽量

    69507
  • JAVA
    +關(guān)注

    關(guān)注

    20

    文章

    2989

    瀏覽量

    109894
  • 大數(shù)據(jù)
    +關(guān)注

    關(guān)注

    64

    文章

    8960

    瀏覽量

    140274
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    (仰天長(zhǎng)嘯)為什么受傷的總是硬件工程師...#MDD#MDD辰達(dá)半導(dǎo)體 #電子工程師

    電子工程師
    MDD辰達(dá)半導(dǎo)體
    發(fā)布于 :2025年04月27日 18:21:47

    問(wèn),成為硬件工程師需要幾只手?#硬件工程師 #YXC晶振 #揚(yáng)興科技 #搞笑

    硬件工程師
    揚(yáng)興科技
    發(fā)布于 :2025年04月25日 17:15:37

    如何成為一名合格的KaihongOS北向應(yīng)用開(kāi)發(fā)工程師

    如何成為一名合格的北向應(yīng)用開(kāi)發(fā)工程師 在快速發(fā)展的軟件開(kāi)發(fā)領(lǐng)域,北向應(yīng)用開(kāi)發(fā)工程師是一個(gè)專(zhuān)注于系統(tǒng)級(jí)應(yīng)用開(kāi)發(fā)的高需求職位。 以下是成為一名
    發(fā)表于 04-23 06:46

    如何成為一名嵌入式軟件工程師

    如何成為一名嵌入式軟件工程師? 01明確崗位的角色與定位 嵌入式軟件工程師主要負(fù)責(zé)開(kāi)發(fā)運(yùn)行在特定硬件平臺(tái)上的軟件,這些軟件通常與硬件緊密集成,以實(shí)現(xiàn)特定的功能。 不僅需要精通編程語(yǔ)言(如C/C++
    發(fā)表于 04-15 14:37

    硬件工程師:回答我!#回答我 #硬件工程師 #YXC晶振 #揚(yáng)興科技

    硬件工程師
    揚(yáng)興科技
    發(fā)布于 :2025年03月25日 18:46:59

    一招拿捏電子工程師#被AI拿捏了 #電子工程師 #電子電工

    電子工程師
    安泰小課堂
    發(fā)布于 :2025年03月25日 17:30:51

    硬件工程師的終極幻想:焊板子焊上人生巔峰!#半導(dǎo)體器件 #硬件工程師 #MDD辰達(dá)半導(dǎo)體

    硬件工程師
    MDD辰達(dá)半導(dǎo)體
    發(fā)布于 :2025年02月24日 19:00:35

    如何成為嵌入式開(kāi)發(fā)工程師

    如何成為嵌入式開(kāi)發(fā)工程師? 成為嵌入式開(kāi)發(fā)工程師通常需要掌握一系列技能和知識(shí),并且在實(shí)踐中不斷積累經(jīng)驗(yàn)。以下是一些基本步驟和建議: 1. 基礎(chǔ)教育:- 獲取電子
    發(fā)表于 02-19 10:39

    為什么嵌入式驅(qū)動(dòng)開(kāi)發(fā)工程師可以拿高薪?

    為什么嵌入式驅(qū)動(dòng)開(kāi)發(fā)工程師可以拿高薪? 嵌入式驅(qū)動(dòng)開(kāi)發(fā),屬于需求量大、薪資斷崖式升高的熱門(mén)崗位,在市場(chǎng)的發(fā)展驅(qū)動(dòng)下成為“風(fēng)口”。從市場(chǎng)的整體需求來(lái)看,嵌入式系統(tǒng)的應(yīng)用隨著5G、物聯(lián)網(wǎng)、大數(shù)據(jù)、云
    發(fā)表于 01-07 16:56

    FPGA算法工程師、邏輯工程師、原型驗(yàn)證工程師有什么區(qū)別?

    ,共同進(jìn)步。 歡迎加入FPGA技術(shù)微信交流群14群! 交流問(wèn)題(一) Q:FPGA中的FPGA算法工程師、FPGA邏輯工程師、FPGA原型驗(yàn)證工程師者有什么區(qū)別? A:FPGA 算法
    發(fā)表于 09-23 18:26

    正是拼的年紀(jì)|65歲電子工程師上班VLOG #65歲退休 #電子工程師 #搞笑 #上班vlog

    電子工程師
    安泰小課堂
    發(fā)布于 :2024年07月25日 11:31:02