天津離線數(shù)據分析-優(yōu)就業(yè)
離線數(shù)據分析
| 授課機構 | 天津中公優(yōu)就業(yè) |
| 上課地點 | 天津南開八里臺|詳細地圖 |
| 成交/評價 | 5.0分 |
| 聯(lián)系電話 | 400-666-4820 |
|
|
|
課程詳情
離線數(shù)據分析平臺Hadoop
課程內容：
1、初識Hadoop以及Hadoop生態(tài)系統(tǒng)、Hadoop的發(fā)展史、Hadoop的優(yōu)缺點、Hadoop的核心組件、Hadoop發(fā)行版的選擇；Hadoop環(huán)境搭建，Hadoopshell命令;
2、Hadoop分布式文件系統(tǒng)HDFS、Hadoop的設計目標、架構及副本的腳本，搭建單節(jié)點偽分布式HDFS的實驗環(huán)境；使用hdfsshell以及JavaAPI的方式操作HDFS文件系統(tǒng)；解析HDFS文件的讀寫流程;
3、分布式計算框架MapReduce；MapReduce應用程序的開發(fā)、配置JobHistoryServer;
4、HadoopHA高可用集群搭建和配置;
5、數(shù)據倉庫Hive的安裝和使用、分桶作用、創(chuàng)建點擊流數(shù)據數(shù)據倉庫、點擊流數(shù)據分析（HiveSql）;
6、Flume分布式日志框架、點擊流日志系統(tǒng)解決方案、點擊流日志系統(tǒng)部署及電商項目集成、Hadoop分布式集群搭建；搭建一個多節(jié)點的分布式Hadoop集群環(huán)境；Hadoop集成Spring的使用;
7、數(shù)據遷移工具Sqoop、HADOOP(Hive)與傳統(tǒng)的數(shù)據庫(mysql、postgresql...)間進行數(shù)據的傳遞;
8、HBase基礎、面向列的實時分布式數(shù)據庫、HBase與RDBMS的對比、HBase集群及其管理;
9、分布式資源調度YARN；YARN的產生背景、YARN的架構及執(zhí)行流程；搭建單節(jié)點偽分布式YARN的實驗環(huán)境;
