大數(shù)據(jù)
1、概述
由于Hadoop已經(jīng)成為業(yè)界的大數(shù)據(jù)標(biāo)準(zhǔn)平臺,許多公司都推出了各自版本的Hadoop,也有一些公司則圍繞Hadoop開發(fā)產(chǎn)品。在Hadoop生態(tài)系統(tǒng)中,規(guī)模較大、知名度較高的公司則是Cloudera。Cloudera公司推出的CCAH是目前全球的大數(shù)據(jù)管理員國際認(rèn)證。
Apache Hadoop管理工程師認(rèn)證(Cloudera CertifiedAdministrator for Apache Hadoop ,CCAH)CCAH認(rèn)證要求學(xué)員具備管理員在配置、部署、維護以及保護Apache Hadoop集群以及包括Hive,Impala,Yarn等在內(nèi)的生態(tài)系統(tǒng)項目時所必需的技術(shù)知識、技能與能力。
2、Hadoop培訓(xùn)基礎(chǔ)
本課程適合于有一定javaSE基礎(chǔ)知識(不需要了解jsp/servlet等web內(nèi)容,對SSH框架無要求),對數(shù)據(jù)庫和sql語句有一定了解,熟練使用linux系統(tǒng)的人士,無需具備 Hadoop基礎(chǔ)和經(jīng)驗。
3、Hadoop培訓(xùn)對象
系統(tǒng)管理員或者任何需要管理 Apache Hadoop 機群的人員(包括產(chǎn)品及開發(fā)環(huán)境)。
企業(yè)管理者、CIO、CTO、政府信息部門官員、項目(開發(fā))經(jīng)理、顧問
IT經(jīng)理,IT顧問,IT支持專家
系統(tǒng)工程師、數(shù)據(jù)中心管理員、云計算管理員及想加入云計算隊伍的您
4、Hadoop認(rèn)證考試
我們建議參加培訓(xùn)的學(xué)員準(zhǔn)備并參加 Cloudera Certified Administrator for Apache Hadoop (CCAH)認(rèn)證考試。
5、Hadoop學(xué)習(xí)內(nèi)容:
Hadoop 分布式文件系統(tǒng)和MapReduce工作原理
Hadoop 集群硬件配置規(guī)劃
Hadoop 集群網(wǎng)絡(luò)配置規(guī)劃
Hadoop 集群配置及優(yōu)化
如何配置NameNode HA
任何配置NameNode Federation
任何配置FairScheduler為多用戶共享Hadoop 集群
任何為Hadoop 集群安裝和實現(xiàn)基于 Kerberos 的安全性
如何維護和監(jiān)測Hadoop 集群
如何使用Flume加載動態(tài)產(chǎn)生的文件以及使用Sqoop連接關(guān)系數(shù)據(jù)庫進行數(shù)據(jù)導(dǎo)入導(dǎo)出
Hive、Pig和HBase等Hadoop 生態(tài)系統(tǒng)工具相關(guān)的系統(tǒng)管理工作
6、Hadoop教學(xué)大綱
介紹 Apache Hadoop的應(yīng)用場景
Hadoop 分布式文件系統(tǒng)
Hadoop 數(shù)據(jù)載入
YARN和MapReduce
規(guī)劃Hadoop機群
Hadoop 安裝和基本配置
安裝配置Hive,Impala和 Pig
Hadoop 客戶端
Cloudera Manager
高級配置
Hadoop 安全
管理和調(diào)度作業(yè)
機群維護
機群監(jiān)測和排錯
結(jié)論
附錄:Kerberos 配置
附錄:HDFS Federation配置