400-688-0112
本教學體系采用模塊化設(shè)計,將Java編程基礎(chǔ)與大數(shù)據(jù)平臺開發(fā)深度融合。課程設(shè)置包含8大技術(shù)模塊,覆蓋從分布式存儲到實時計算的完整解決方案,特別在Cloudera環(huán)境搭建、Hive數(shù)據(jù)倉庫優(yōu)化、Storm流處理等企業(yè)級應(yīng)用場景重點強化。
模塊 | 技術(shù)方向 | 知識單元 | 核心要點 | 能力目標 |
---|---|---|---|---|
基礎(chǔ)篇 | Hadoop生態(tài) | 平臺搭建 | Cloudera Manager部署與集群管理 | 掌握Hadoop組件配置與運維 |
存儲管理 | HDFS原理與分布式文件操作 | |||
計算框架 | MapReduce與Yarn任務(wù)調(diào)度 | |||
數(shù)據(jù)遷移 | Sqoop跨平臺數(shù)據(jù)傳輸實踐 | |||
進階篇 | 實時計算 | Storm架構(gòu) | 流處理拓撲與Trident事務(wù)處理 | 構(gòu)建高可用實時計算系統(tǒng) |
集群部署 | Zookeeper協(xié)調(diào)服務(wù)配置 | |||
案例實戰(zhàn) | 網(wǎng)站UV/PV統(tǒng)計與日志分析 | |||
消息隊列 | Kafka分布式消息系統(tǒng)集成 | |||
容錯機制 | 事務(wù)型Spout開發(fā)與調(diào)優(yōu) |
支持模塊 | 服務(wù)內(nèi)容 |
---|---|
實驗環(huán)境 | Cloudera企業(yè)級集群/多節(jié)點Docker環(huán)境 |
教學方式 | 案例驅(qū)動教學+Git版本控制協(xié)同開發(fā) |
質(zhì)量監(jiān)控 | 每日代碼Review+階段性項目答辯 |