崗位職責(zé)
負(fù)責(zé)大數(shù)據(jù)集群系統(tǒng)運(yùn)維,包含系統(tǒng)監(jiān)控、應(yīng)急響應(yīng)、容量規(guī)劃等,研究大數(shù)據(jù)業(yè)務(wù)相關(guān)運(yùn)維技術(shù),持續(xù)優(yōu)化集群服務(wù)架構(gòu),探索新的大數(shù)據(jù)運(yùn)維技術(shù)及發(fā)展方向;
設(shè)計(jì)和指導(dǎo)基于Hadoop的MapReduce、Hive、HBase等應(yīng)用開(kāi)發(fā);
1、負(fù)責(zé)公司核心集群的運(yùn)維工作,**其高可用和穩(wěn)定性。
2、負(fù)責(zé)集群容量規(guī)劃、擴(kuò)容及集群性能優(yōu)化。
3、深入研究大數(shù)據(jù)業(yè)務(wù)相關(guān)運(yùn)維技術(shù),持續(xù)優(yōu)化集群服務(wù)架構(gòu),探索新的Hadoop運(yùn)維技術(shù)及發(fā)展方向。
4、設(shè)計(jì)實(shí)現(xiàn)分布式集群的運(yùn)維、監(jiān)控和管理平臺(tái)。
崗位階梯
系統(tǒng)維護(hù)工程師、運(yùn)維工程師、數(shù)據(jù)庫(kù)管理員、技術(shù)支持 4--8K
大數(shù)據(jù)研發(fā)工程師、大數(shù)據(jù)管理工程師、大數(shù)據(jù)架構(gòu)師 6--12K
運(yùn)維總監(jiān)、IT經(jīng)理、大數(shù)據(jù)研發(fā)經(jīng)理、大數(shù)據(jù)項(xiàng)目經(jīng)理 10K--30K
課程介紹
目前Hadoop在很多企業(yè)應(yīng)用越來(lái)越廣泛,Hadoop人才也很稀缺和搶手,待遇也水漲船高。本系列課講解目前主流的Hadoop版本Cloudera Hadoop 5(這里采用cdh5.1),該版本相比0.20.x,性能和穩(wěn)定性上提高很多。CDH5環(huán)境搭建相比舊版本也復(fù)雜很多,但可以用Cloudera-Manager對(duì)集群進(jìn)行管理和配置。CDH5默認(rèn)集成了常用的所有組件如Hive、Sqoop、Hbase、Hue、Pig、Flume、Spark、Zookeeper等,從而形成一功能強(qiáng)大的分布式平臺(tái)。
課程設(shè)置
教學(xué)環(huán)境
學(xué)校環(huán)境圖一
學(xué)校環(huán)境圖二
學(xué)校環(huán)境圖三
關(guān)于我們
上海昂立教育培訓(xùn)有限公司秉持上海交通大學(xué)“自強(qiáng)首在儲(chǔ)才,儲(chǔ)才必先興學(xué)”的信念,恪守嚴(yán)謹(jǐn)務(wù)實(shí)的學(xué)風(fēng),以培養(yǎng)高質(zhì)量實(shí)用技術(shù)人才為宗旨,堅(jiān)持 “以學(xué)習(xí)者為中心”的理念,致力于為學(xué)習(xí)者提供標(biāo)準(zhǔn)化、高品質(zhì)的個(gè)性化教育服務(wù),以提升他們的個(gè)人競(jìng)爭(zhēng)能力。經(jīng)過(guò)十余年的發(fā)展,上海交通大學(xué)昂立教育已成為全國(guó)上海知名的教育品牌,取得輝煌的成績(jī),為社會(huì)培養(yǎng)出了大量的人才。目前是上海具規(guī)模、課程體系完善、師資力量強(qiáng)、管理先進(jìn)的教育品牌。
交大昂立教育的標(biāo)準(zhǔn)化服務(wù)體系和學(xué)習(xí)內(nèi)容通過(guò)實(shí)戰(zhàn)驅(qū)動(dòng)教學(xué),對(duì)學(xué)習(xí)者進(jìn)行個(gè)性化評(píng)測(cè)與診斷、個(gè)性化學(xué)習(xí)內(nèi)容和資源的“配送”、個(gè)性化的反饋跟蹤和個(gè)性化的互動(dòng)指導(dǎo),為學(xué)習(xí)者創(chuàng)設(shè)了一個(gè)完全適合其自身特點(diǎn)的個(gè)性化學(xué)習(xí)環(huán)境,大限度地挖掘和激發(fā)學(xué)習(xí)者個(gè)人的學(xué)習(xí)潛能,讓學(xué)習(xí)者體驗(yàn)高效的成功學(xué)習(xí)。
交大昂立教育真正把傳統(tǒng)教育資源、商業(yè)企業(yè)技術(shù)資源與個(gè)體教育需求整合在一起來(lái)創(chuàng)造教育價(jià)值,開(kāi)創(chuàng)業(yè)界先河,繼承母校上海交通大學(xué)百年學(xué)府深厚的辦學(xué)傳統(tǒng),奮發(fā)圖強(qiáng)的發(fā)展歷程,乘風(fēng)揚(yáng)帆,朝著“綜合性、研究型、國(guó)際化”的世界目標(biāo)奮進(jìn)。