 班級規(guī)模及環(huán)境--熱線:4008699035 手機:15921673576( 微信同號) |
|
每期人數(shù)限3到5人。 |
| 上課時間和地點 |
上課地點：【上海】：同濟大學(xué)(滬西)/新城金郡商務(wù)樓(11號線白銀路站) 【深圳分部】：電影大廈(地鐵一號線大劇院站)/深圳大學(xué)成教院 【北京分部】：北京中山學(xué)院/福鑫大樓 【南京分部】：金港大廈(和燕路) 【武漢分部】：佳源大廈（高新二路） 【成都分部】：領(lǐng)館區(qū)1號（中和大道） 【沈陽分部】：沈陽理工大學(xué)/六宅臻品 【鄭州分部】：鄭州大學(xué)/錦華大廈 【石家莊分部】：河北科技大學(xué)/瑞景大廈 【廣州分部】：廣糧大廈 【西安分部】：協(xié)同大廈
最近開課時間(周末班/連續(xù)班/晚班）：2020年3月16日 |
| 實驗設(shè)備 |
☆資深工程師授課
☆注重質(zhì)量
☆邊講邊練
☆合格學(xué)員免費推薦工作
★實驗設(shè)備請點擊這兒查看★ |
| 質(zhì)量保障 |
1、培訓(xùn)過程中，如有部分內(nèi)容理解不透或消化不好，可免費在以后培訓(xùn)班中重聽；
2、培訓(xùn)結(jié)束后,授課老師留給學(xué)員聯(lián)系方式,保障培訓(xùn)效果,免費提供課后技術(shù)支持。
3、培訓(xùn)合格學(xué)員可享受免費推薦就業(yè)機會。 |
課程大綱 |
| |
- EasyHadoop 開發(fā)培訓(xùn)
?
EasyHadoop 開發(fā)培訓(xùn)
課程目標(biāo):此課程面向企業(yè)軟件工程師、數(shù)據(jù)庫工程師、以及對Hadoop開發(fā)感興趣的各類技術(shù)人員。通過此課程的學(xué)習(xí)，學(xué)員可以全面掌握Hadoop的架構(gòu)原理和使用場景，并通過貫
穿課程的習(xí)題項目進行實戰(zhàn)鍛煉，從而熟練使用Hadoop進行MapReduce程序開發(fā)。課程還涵蓋了分布式計算領(lǐng)域的常用算法介紹，幫助學(xué)員為企業(yè)在利用大數(shù)據(jù)方面體現(xiàn)
自身價值。目標(biāo)學(xué)員:軟件工程師、高級軟件工程師、數(shù)據(jù)庫開發(fā)人員、互聯(lián)網(wǎng)服務(wù)后臺開發(fā)人員、運維人員
?
培訓(xùn)大綱
一、Hadoop MapReduce
流程分析?? ?
????
·Hadoop JobTracker 詳解回顧
????
·Hadoop TaskTracker 詳解回顧
????
·Hadoop 任務(wù)提交流程詳解"
二、使用 Hadoop MapReduce Streaming 編程?? ?
????
·Hadoop Streaming 和 Java MapReduce Api 差異。
????
·學(xué)習(xí)使用 MapReduce 實現(xiàn)數(shù)據(jù)庫功能,比如select group by join union all )
三、MapReduce分布式程序
????
·MapReduce流程
????
·剖析一個MapReduce程序
????
·基本MapReduceAPI 概念
????
·驅(qū)動代碼
????
·Mapper
????
·Reducer
????
·API 使用Eclipse進行快速開發(fā)
????
·上機實驗
????
·新MapReduce API
四、Hadoop 核心代碼導(dǎo)讀
????
·Hadoop Mapper 類核心代碼導(dǎo)讀
????
·Hadoop Reducer 類核心代碼導(dǎo)讀
五、HDFS分布式文件系統(tǒng)編程 ?? ?
????
·Hadoop HDFS 回顧
????
·Hadoop NameNode 回顧
????
·Hadoop DataNode 回顧
????
·hadoop I/O 操作
????
·使用Hadoop HDFS API對HDFS編程
六、Hadoop Mapreduce高級編程
????
· ToolRunner介紹
????
·使用MRUnit進行測試
????
·利用Combiners來減少中間數(shù)據(jù)
????
·使用Configure和Close方法來進行Map/Reduce設(shè)置和關(guān)閉
????
·編寫Partitioner來優(yōu)化負載平衡
????
·上機實驗
????
·直接訪問Hadoop分布式文件系統(tǒng)（HDFS）
????
·使用分布式緩存（Distributed Cache）
????
·上機實驗 "
七、MapReduce的優(yōu)化
????
·map優(yōu)化
????
·reduce優(yōu)化
????
·小文件優(yōu)化"
八、MapReduce的任務(wù)調(diào)度
????
·Queue調(diào)度的使用
????
·公平調(diào)度的使用
????
·能力調(diào)度的使用"
九、MapReduce編程實戰(zhàn)
????
·Hadoop的join操作
????
·Hadoop的二次排序
????
·Hadoop的海量日志分析"
十、flume+hadoop日志的收集實戰(zhàn)
????
·flume介紹
????
·flume核心組件講解
????
·flume自帶的組件分析
????
·flume二次開發(fā)實戰(zhàn)
?
?
?
?
?
?
?
?
?
? ?
?
?
?
?
?
"
|
首頁 課程表 在線聊 報名 講師 品牌 QQ聊 活動 就業(yè)