大數據管理專家
崗位職責
負責大數據集群系統運維,包含系統監控、應急響應、容量規劃等,研究大數據業務相關運維技術,持續優化集群服務架構,探索新的大數據運維技術及發展方向;
設計和指導基于Hadoop的MapReduce、Hive、HBase等應用開發;
1、負責公司核心集群的運維工作,保證其高可用和穩定性。
2、負責集群容量規劃、擴容及集群性能優化。
3、深入研究大數據業務相關運維技術,持續優化集群服務架構,探索新的Hadoop運維技術及發展方向。
4、設計實現分布式集群的運維、監控和管理平臺。
崗位階梯
系統維護工程師、運維工程師、數據庫管理員、技術支持
大數據研發工程師、大數據管理工程師、大數據架構師
運維總監、IT經理、大數據研發經理、大數據項目經理
課程介紹
目前Hadoop在很多企業應用越來越廣泛,Hadoop人才也很稀缺和搶手,待遇也水漲船高。本系列課講解目前主流的Hadoop版本Cloudera Hadoop 5(這里采用cd**.1),該版本相比0.**.x,性能和穩定性上提高很多。CDH5環境搭建相比舊版本也復雜很多,但可以用Cloudera-Manager對集群進行管理和配置。CDH5默認集成了常用的所有組件如Hive、Sqoop、Hbase、Hue、Pig、Flume、Spark、Zookeeper等,從而形成一功能強大的分布式平臺。
課程設置
課程模塊主要內容
Java核心課
Java 入門基礎、Java 程序設計+高級工具包開發、SCJP/OCJP
Oracle認證Java程序設計工程師
RHCE
RHCE是Red Hat推出的Linux認證,主要考核技術人員對Linux內核系統的管理能力,能夠具備安裝、配置一個全新的Linux系統,并將其對接企業級網絡及數據庫的能力。
OCP
OCP認證專家級技能和技術知識考試, 通過這個考試, 說明具備管理大型數據庫的能力, 或者能夠開發可以部署到整個企業的強大應用,并進行跨平臺ORACLE實戰部署。
MYSQL
本節主要是認識數據庫環境,了解數據庫的操作步驟,掌握一些數據庫連接的方法、創建和設置數據庫等。
CISCO data center
1. 互聯網線纜、設備上架、設備系統更新、線纜選用等基礎布線方法。
2. 互聯網維護時的故障診斷和臨時解決方案流程解析。
HADOOP融合微軟構建和運營公共云的豐富經驗,Windows Server 2012 作為云計算時代的新一代的IT 平臺,為企業和托管服務提供商提供了可擴展的、動態的、多租戶感知的服務器和云基礎結構,實現了安全的跨地域連接,并使得IT 系統和人員能夠更快、更有效地響應業務需求。
NO**QL
NoSQL,泛指非關系型的數據庫。隨著互聯網we**.0網站的興起,傳統的關系數據庫在應付we**.0網站,特別是超大規模和高并發的SNS類型的we**.0純動態網站已經顯得力不從心。