[課程簡介]:現(xiàn)如今,大數(shù)據(jù)的應用并不僅存在于一些“理工類領域”,它已經(jīng)滲透到我們生活的方方面面,將來,大數(shù)據(jù)在能源、金融、電信、汽車、消費等大多數(shù)行業(yè)都有用武之地,行業(yè)發(fā)展?jié)摿薮。去年,國?nèi)數(shù)據(jù)創(chuàng)業(yè)已是風起云涌,其實,2016才是真正意義上的大數(shù)據(jù)元年。據(jù)IDC預測,到2020年,大數(shù)據(jù)分析技術(shù)將成為所有國家經(jīng)濟增長的關鍵動力。 ...
【時間地點】 | 2018年4月17-21日 上海(17日全天報到) | ||
【培訓講師】 | 張老師 | ||
【參加對象】 | 各地政府,院校云計算物聯(lián)網(wǎng)產(chǎn)業(yè)相關負責人,各類 IT/軟件企業(yè)和研發(fā)機構(gòu)的軟件架構(gòu)師、軟件設計師、程序員、技術(shù)總監(jiān)、數(shù)據(jù)挖掘負責人、數(shù)據(jù)挖掘開發(fā)工程師等 | ||
【參加費用】 | ¥6800元/人 (含培訓費、考試費、證書費、資料費、午餐) 食宿統(tǒng)一安排,費用自理。 | ||
【會務組織】 | 森濤培訓網(wǎng)(dbslw.com.cn).廣州三策企業(yè)管理咨詢有限公司 | ||
【咨詢電話】 | 020-34071250;020-34071978(提前報名可享受更多優(yōu)惠) | ||
【聯(lián) 系 人】 | 龐先生,鄧小姐;13378458028、18924110388(均可加微信) | ||
【在線 QQ 】 | 568499978 | 課綱下載 | |
【溫馨提示】 | 本課程可引進到企業(yè)內(nèi)部培訓,歡迎來電預約! |
為貫徹落實黨中央國務院“十三五”規(guī)劃指導精神,實施網(wǎng)絡強國戰(zhàn)略,加快建設數(shù)字中國;構(gòu)建高效信息網(wǎng)絡,推進物聯(lián)網(wǎng)發(fā)展;實施“互聯(lián)網(wǎng)+”行動計劃,促進多領域融合發(fā)展;實施國家大數(shù)據(jù)戰(zhàn)略,加快政府數(shù)據(jù)開放;加強數(shù)據(jù)安全包含,全面保障信息系統(tǒng)安全;推進軍民融合發(fā)展立法。要實施國家大數(shù)據(jù)戰(zhàn)略,把大數(shù)據(jù)作為基礎性戰(zhàn)略資源,全面實施促進大數(shù)據(jù)發(fā)展行動,加快推動數(shù)據(jù)資源共享開放和開發(fā)應用,助力產(chǎn)業(yè)轉(zhuǎn)型升級和社會治理創(chuàng)新。加快政府數(shù)據(jù)開放共享,促進大數(shù)據(jù)產(chǎn)業(yè)健康發(fā)展。
現(xiàn)如今,大數(shù)據(jù)的應用并不僅存在于一些“理工類領域”,它已經(jīng)滲透到我們生活的方方面面,將來,大數(shù)據(jù)在能源、金融、電信、汽車、消費等大多數(shù)行業(yè)都有用武之地,行業(yè)發(fā)展?jié)摿薮。去年,國?nèi)數(shù)據(jù)創(chuàng)業(yè)已是風起云涌,其實,2016才是真正意義上的大數(shù)據(jù)元年。據(jù)IDC預測,到2020年,大數(shù)據(jù)分析技術(shù)將成為所有國家經(jīng)濟增長的關鍵動力。大數(shù)據(jù)分析及其相關的市場的復合年增長率將達到26.4%,在2018年全球?qū)l(fā)展到415億美元的規(guī)模。同時,IDC認為,到2020年大數(shù)據(jù)分析技術(shù)將成為所有國家經(jīng)濟增長的關鍵動力。然而大數(shù)據(jù)架構(gòu)最火熱的莫過于Hadoop,Spark和Storm這三種
課程目標
1、了解Hadoop與Spark的歷史及目前發(fā)展的現(xiàn)狀、以及Hadoop與Spark的技術(shù)特點,從而把握分布式計算框架及未來發(fā)展方向,在大數(shù)據(jù)時代能為企業(yè)的技術(shù)選型及架構(gòu)設計提供決策參考。
2、全面掌握Hadoop與Spark的架構(gòu)原理和使用場景,并通過貫穿課程的項目進行實戰(zhàn)鍛煉,從而熟練使用Hadoop進行MapReduce程序開發(fā)。課程還涵蓋了分布式計算領域的常用算法介紹,幫助學員為企業(yè)在利用大數(shù)據(jù)方面體現(xiàn)自身價值。
3、深入理解Hadoop與Spark技術(shù)架構(gòu),對Hadoop與Spark運作機制有清晰全面的認識,可以獨立規(guī)劃及部署生產(chǎn)環(huán)境的Hadoop與Spark集群,掌握Hadoop與Spark基本運維思路和方法,對Hadoop與Spark集群進行管理和優(yōu)化。
師資介紹
張老師:阿里大數(shù)據(jù)高級專家,國內(nèi)資深的Spark、Hadoop技術(shù)專家、虛擬化專家,對HDFS、MapReduce、HBase、Hive、Mahout、Storm、spark和openTSDB等Hadoop生態(tài)系統(tǒng)中的技術(shù)進行了多年的深入的研究,更主要的是這些技術(shù)在大量的實際項目中得到廣泛的應用,因此在Hadoop開發(fā)和運維方面積累了豐富的項目實施經(jīng)驗。近年主要典型的項目有:某電信集團網(wǎng)絡優(yōu)化、中國移動某省移動公司請賬單系統(tǒng)和某省移動詳單實時查詢系統(tǒng)、中國銀聯(lián)大數(shù)據(jù)數(shù)據(jù)票據(jù)詳單平臺、某大型銀行大數(shù)據(jù)記錄系統(tǒng)、某大型通信運營商全國用戶上網(wǎng)記錄、某省交通部門違章系統(tǒng)、某區(qū)域醫(yī)療大數(shù)據(jù)應用項目、互聯(lián)網(wǎng)公共數(shù)據(jù)大云(DAAS)和構(gòu)建游戲云(Web Game Daas)平臺項目等。
培訓特色
注重應用:分析國內(nèi)實際情況,結(jié)合國際、國內(nèi)成功經(jīng)驗。采用實戰(zhàn)的項目,讓學員在短時間內(nèi)掌握Hadoop與Spark的搭建與配置。并進行高效的大數(shù)據(jù)清洗和分析。
形式靈活:互動課堂、免費技術(shù)沙龍、提供云計算項目建設咨詢、大數(shù)據(jù)Hadoop平臺的搭建。
頒發(fā)證書
參加相關培訓并通過考試的學員,可以獲得:
工業(yè)和信息化部頒發(fā)的-《大數(shù)據(jù)開發(fā)高級工程師證書》。該證書可作為專業(yè)技術(shù)人員職業(yè)能力考核的證明,以及專業(yè)技術(shù)人員崗位聘用、任職、定級和晉升職務的重要依據(jù)。注:請學員帶一寸彩照2張(背面注明姓名)、身份證復印件一張。
培訓內(nèi)容(4天課程)
HADOOP模塊 |
課程主題 |
主要內(nèi)容 |
案例和演示 |
模塊一 |
Hadoop在云計算技術(shù)的作用和地位 |
|
|
模塊二 |
Hadoop生態(tài)系統(tǒng)介紹和演示 |
|
|
模塊三 |
Hadoop組件詳解 |
|
|
模塊四 |
Hadoop安裝和部署 |
|
|
模塊五 |
Hadoop集群規(guī)劃 |
|
|
模塊六 |
MapReduce 算法原理 |
|
|
模塊七 |
編寫MapReduce高級程序 |
|
|
模塊八 |
集成Hadoop到現(xiàn)有工作流 |
|
|
模塊九 |
使用Hive和Pig開發(fā)及技巧 |
|
|
模塊十 |
Hbase安裝和使用 |
|
|
模塊十一 |
Hadoop2.0 集群探索 |
|
|
模塊十二 |
Hadoop企業(yè)級別案例解析 |
|
|
模塊十三 |
RedHadoop 企業(yè)版本 |
|
|
模塊十四 |
Spark |
Mapreduce、storm和spark模型的比較和使用場景介紹 |
模塊十五 |
Spark |
Spark安裝簡介 |
模塊十六 |
Spark |
Spark的運行架構(gòu) |
模塊十七 |
Spark |
• Scala基本語法與高階語法 |