91原色影院_免费av在线_中文字幕最新精品_久久精品视频99

  歡迎訪問企業培訓網!
免費注冊 | 會員登陸 | 發布培訓需求 | 下載培訓APP | 將本站設為首頁 | 加入收藏夾

大數據Hadoop與Spark架構應用實戰

在線報名享折扣】  【培訓積分換禮品】    QQ在線咨詢
企業培訓網
(本課程滾動開課,如遇開課時間或者地點不合適,請撥打010-62278113咨詢最新時間、地點等培訓安排!)

【培訓安排】
  2016年03月24日~2016年03月27日  廣東廣州市
  2016年04月22日~2016年04月25日  浙江杭州市
  2016年05月23日~2016年05月26日  四川成都市
  2016年06月26日~2016年06月29日  北京北京城區
  2016年07月28日~2016年07月31日  上海閘北區
  2016年08月26日~2016年08月29日  浙江寧波市
  2016年09月23日~2016年09月26日  江蘇南京市
  2016年10月28日~2016年10月31日  浙江杭州市
  2016年11月26日~2016年11月29日  上海閘北區
  2016年12月17日~2016年12月20日  福建福州市
【課程費用】5800元 (含資料費、午餐、茶點、發票)
【招生對象】對此課程感興趣的學員。
【培訓特色】
1. 課程培訓業界最流行、應用最廣泛的Hadoop與Spark大數據技術體系。強化大數據平臺的分布式集群架構和核心關鍵技術實現、大數據應用項目開發和大數據集群運維實踐、以及Hadoop與Spark大數據項目應用開發與調優的全過程沙盤模擬實戰。
2. 通過一個完整的大數據開發項目及一組實際項目訓練案例,完全覆蓋Hadoop與Spark生態系統平臺的應用開發與運維實踐。課堂實踐項目以項目小組的形式進行沙盤實操練習,重點強化理解Hadoop與Spark大數據項目各個階段的工作重點,同時掌握作為大數據項目管理者的基本技術與業務素養。
3. 本課程的授課師資都是有著多年在一線從事Hadoop與Spark大數據項目的資深講師,采用原理技術剖析和實戰案例相結合的方式開展互動教學、強化以建立大數據項目解決方案為主體的應用開發、技術討論與交流咨詢,在學習的同時促進講師學員之間的交流,讓每個學員都能在課程培訓過程中學到實實在在的大數據技術知識體系,以及大數據技術應用實戰技能,具備實際大數據應用項目的動手開發實踐與運維管理部署能力。授課過程中,根據學員需求,增設交流環節,可將具體工作中遇到的實際問題展開討論,講師會根據學員的實際情況微調授課內容,由講師帶著全部學員積極討論,并給出一定的時間讓學員上臺發言,現場剖析問題的癥結,規劃出可行的解決方案。
【培訓目標】
通過本次課程的培訓,學員可達到如下目標:
1. 深刻理解在“互聯網+”時代下大數據的產生背景、發展歷程和演化趨勢;
2. 了解業界市場需求和國內外最新的大數據技術潮流,洞察大數據的潛在價值,;
3. 理解大數據項目解決方案及業界大數據應用案例,從而為企業在大數據項目中的技術選型及技術架構設計提供決策參考;
4. 全面掌握業界最流行的Hadoop與Spark大數據技術體系;
5. 掌握大數據采集技術;
6. 掌握大數據分布式存儲技術;
7. 掌握NoSQL與NewSQL分布式數據庫技術;
8. 掌握大數據倉庫與統計機器學習技術;
9. 掌握大數據分析挖掘與商業智能(BI)技術;
10. 掌握大數據離線處理技術;
11. 掌握Storm流式大數據處理技術;
12. 掌握基于內存計算的大數據實時處理技術;
13. 掌握大數據管理技術的原理知識和應用實戰;
14. 深入理解大數據平臺技術架構和使用場景;
15. 嫻熟地運用Hadoop與Spark大數據技術體系規劃解決方案滿足實際項目需求;
16. 掌握如何部署符合生產環境要求的Hadoop大數據集群;
17. 熟練地掌握基于Hadoop與Spark大數據平臺進行應用程序開發、集群運維管理和性能調優技巧。

【課程大綱】
第一天上午 大數據技術基礎
1. 大數據的產生背景、發展歷程
2. 大數據和云計算的關系
3. 大數據應用需求以及潛在價值分析
4. 業界最新的大數據技術發展態勢與應用趨勢
5. 大數據項目的技術選型與架構設計
6. “互聯網+”時代下的電子商務、制造業、零售批發業、電信運營商、互聯網金融業、網上銀行、電子政務、移動互聯網、教育信息化等行業應用實踐與應用案例剖析
業界主流的大數據技術產品與項目解決方案
1. 國內外主流的大數據解決方案介紹
2. 當前大數據解決方案與傳統數據庫方案的剖析比較
3. Apache大數據平臺方案剖析
4. CDH大數據平臺方案剖析
5. HDP大數據平臺方案剖析
6. 開源的大數據生態系統平臺剖析
Hadoop大數據平臺剖析
1. Hadoop的發展歷程以及產業界的實際應用介紹
2. Hadoop大數據平臺架構
3. 基于Hadoop平臺的PB級大數據存儲管理與分析處理的工作原理與機制
4. Hadoop的核心組件剖析

第一天下午 大數據分布式存儲系統原理及其應用實踐
1. 分布式文件系統HDFS的簡介
2. HDFS系統的主從式平臺架構和工作原理
3. HDFS核心組件技術講解
4. 基于HDFS的大型存儲系統應用開發實戰
5. HDFS集群的安裝、部署、配置與性能優化實踐
6. HDFS與Linux NFS3交互技術以及本地化部署應用實踐
7. 分布式鍵值存儲系統的平臺架構、核心技術以及應用開發
8. PB級大數據存儲項目的案例分析
大數據MapReduce與Yarn并行處理平臺
1. MapReduce并行計算模型
2. MapReduce作業執行與調度技術
3. 第二代大數據計算框架Yarn的工作原理以及DAG并行執行機制
4. MapReduce應用開發環境的部署,以及大數據并行處理應用程序開發
5. MapReduce高級編程技巧與性能優化實踐
6. MapReduce與Yarn大數據分析處理案例分析
Hadoop應用實踐操作訓練
1. 部署與配置HDFS,熟練操作HDFS SHELL,HDFS與NFS操作,以及HDFS API開發實踐
2. 部署與配置MapReduce與Yarn及其開發實踐
3. Hadoop的Linux二次開發環境部署與配置

第二天上午 HBase分布式數據庫管理系統
1. NoSQL數據庫與NewSQL數據庫技術介紹,及其在半結構化和非結構化大數據方面的應用實踐
2. HBase分布式數據庫簡介、數據模型以及工作原理
3. HBase分布式數據庫集群的平臺架構和關鍵技術剖析
4. HBase應用項目開發技巧,以及客戶端開發實戰
5. HBase表設計與數據操作以及數據庫管理API調用
6. HBase集群的安裝部署與配置優化
7. ZooKeeper分布式協調服務系統的工作原理、平臺架構、集群部署與配置應用實戰
8. HBase集群的運維與監控管理
HBase半結構化數據管理應用實踐操作訓練
1. 部署與配置HBase集群以及HBase的性能優化
2. 部署與配置ZooKeeper分布式集群
3. 構建HBase開發環境
4. HBase數據庫操作及項目實踐

第二天下午 Hive大型數據倉庫集群平臺及其應用實踐
1. 基于Hadoop的大型分布式數據倉庫基礎知識,HIVE在行業中的數據倉庫應用案例
2. Hive大數據倉庫簡介以及應用介紹
3. Hive數據倉庫集群的平臺體系結構、核心技術剖析
4. Hive Server的工作原理、機制與應用
5. Hive數據倉庫集群的安裝部署與配置優化
6. Hive應用開發技巧
7. Hive SQL剖析與應用實踐
8. Hive數據倉庫表與表分區、表操作、數據導入導出、客戶端操作技巧
9. Hive數據倉庫報表設計
10. Hive JDBC與ODBC的工作原理與實現機制
11. Hive HWI、CLI客戶端操作以及UDF應用實踐
Mahout大數據分析挖掘平臺及其應用實踐
1. Mahout集群的安裝部署與配置優化
2. Mahout實現客戶分析,廣告分析,日志分析,規律預測,關聯分析,定向推薦等應用程序的開發與應用實戰
3. Mahout性能優化與分析挖掘算法參數的優化技巧
Hive數據倉庫與Mahout數據挖掘平臺的應用實踐操作訓練 1. 部署與配置HIVE集群,以及HIVE性能調優
2. 構建HIVE開發環境
3. HIVE數據倉庫操作及項目實踐
4. 實現Mahout與Hadoop HBase的應用集成,實現日志數據分析挖掘項目的應用實踐

第三天上午 Spark大數據實時處理平臺剖析
1. Spark的發展歷程以及業界的實際應用介紹
2. Spark實時大數據處理平臺架構
3. Spark RDD內存彈性分布式數據集的工作原理與機制
4. Spark的核心組件剖析
5. 基于Spark的實時數據倉庫與實時分析挖掘處理在行業中的應用實踐案例
基于Spark的實時數據倉庫和實時數據分析挖掘處理平臺的實現機制,以及SparkSQL,Spark Streaming,MLib,GraphX,SparkR的應用實踐
1. 內存計算模型和實時處理技術介紹
2. Spark中各個分布式組件的處理框架及工作原理
3. Spark SQL實時數據倉庫的實現原理機制及應用實踐
4. Spark Streaming流式數據實時處理機制及應用實踐
5. Spark MLib實時機器學習算法應用實踐與案例應用
6. Spark GraphX實時圖數據處理應用實踐與社交網絡分析應用案例
7. SparkR的實現原理與應用實踐
8. Spark組件的應用編程開發實戰
9. Spark與Hadoop的集成解決方案實踐
Spark平臺與各個組件的實踐操作訓練
1. 部署與配置Spark集群,以及Spark性能調優
2. 構建Spark開發環境
3. Spark程序運行以及操作
4. Spark SQL應用操作實訓
5. Spark Streaming應用操作實訓
6. Spark MLib應用操作實訓
7. Spark GraphX應用操作實訓
8. SparkR應用操作實訓
9. Spark與HBase集成數據分析實驗實訓

第三天下午 Storm流式數據處理平臺架構及其應用實踐
1. Storm流式處理系統的平臺架構和工作原理
2. Storm關鍵技術剖析
3. Storm集群安裝部署與配置優化
4. Storm日志流數據分析項目應用實戰
5. Storm和Hadoop,Spark的應用集成項目實踐
大數據智能化ETL操作工具以及Hadoop集群運維監控工具平臺應用
1. Hadoop與DBMS之間數據交互工具的應用
2. Sqoop導入導出數據的工作原理,以及Sqoop集群安裝部署與配置
3. Kettle集群的平臺架構、核心技術工作原理以及應用案例
4. Kettle大數據ETL工具的部署與配置,以及應用實戰
5. 利用Sqoop實現MySQL與Hadoop集群之間的數據導入導出交互程序
6. Hadoop大數據運維監控管理系統HUE平臺的安裝部署與應用配置
7. Hadoop運維管理監控系統Ambari平臺的安裝部署與應用配置
8. Hadoop集群運維系統Ganglia, Nagios的安裝部署與應用配置
大數據分布式采集與分布式消息訂閱系統及其應用實踐(可選)
1. Flume-NG數據采集系統的數據流模型、平臺架構、集群部署與配置應用實戰
2. Kafka分布式消息訂閱系統的應用介紹、平臺架構、集群部署與配置應用實戰
內存數據庫管理系統及其應用實踐(可選)
1. Impala實時查詢系統平臺架構、核心關鍵技術剖析
2. Impala實時查詢系統的部署與應用開發實踐
3. Redis內存數據庫集群架構以及核心技術剖析
4. Redis集群的部署與應用開發實戰與案例分析
Cassandra數據管理系統應用實踐(可選)
1. Cassandra集群的平臺架構以及核心關鍵技術
2. Cassandra一致性哈希算法與數據對象分布策略
3. Cassandra集群的安裝部署與配置優化
4. Cassandra應用開發實戰與案例分析
大數據項目應用完整實踐與咨詢討論
1. 根據講師布置的實際應用案例,開展大數據完整項目部署設計和應用開發實踐
2. 大數據項目的需求分析、應用實施以及解決方案分享咨詢與交流討論

【老師介紹】
鐘老師  現任職于中科院某研究所,高級工程師,副高職稱,項目組負責人,博士畢業于中國科學院計算技術研究所,獲工學博士學位(計算機系統結構方向)。中國電子標準協會的大數據、云計算、移動互聯網系列課程建設與教學專家。近六年來帶領團隊主要從事大數據與云計算技術項目的研發與IT項目管理工作。鐘老師有著多年的企業內訓和公開課培訓講師經歷,主要講授大數據平臺技術、云計算、移動互聯網、電子商務、IT信息軟件項目管理、企業信息化規劃與管理、IT戰略規劃與企業架構、數據中心主機規劃與IDC系統運營等企業實戰類培訓課程。鐘老師將原理技術剖析和應用實戰相結合的授課風格受到廣大公開課學員和企業內訓學員的歡迎。
蔣老師  清華大學博士,云計算專家 熟悉主流的云計算平臺,并有商業與開源云計算平臺的實踐經驗,對云計算關鍵技術有深刻了解和實踐經驗,如分布式系統、虛擬化、分布式文件系統、云存儲等,參與并領導多個大型云計算項目。對大數據關鍵技術有深刻了解和實踐經驗,如NoSQL數據庫、大數據處理、Hadoop、Hive、HBase、Spark等。    
錢老師  大數據專家。在電信、電力、金融行業從事Java開發和架構設計的工作;資深云計算研發工程師。作為項目的主要成員和負責人參與并領導完成了多個大型復雜項目,并成功應用于行業解決方案,如海量數據匹配系統、電力行業實時數據采集分析系統等。設計并實現了實時索引系統-云搜,成功應用與某國企知識庫系統。并可應用與互聯網行業的搜索等應用。完成多個云計算解決方案的架構,涉及到金融行業海量數據分析與數據處理系統、海量日志分析系統、電力用電信息統計系統等,獲得業界認可。

【報名咨詢】

    聯系電話:010-62258232  62278113  13718601312  18610339408

    聯 系 人:李先生   陳小姐

    電子郵件:25198734@qq.com  11075627@qq.com

在線登記培訓意向(提前報名可享受折扣優惠):
課程名稱:
 
企業名稱:
 
聯系人:
 
所在部門:
 
聯系電話:
 
傳真號碼:
 
公司網址:
 
電子郵件:
 
學員信息(三人以上報名請點擊下載培訓報名表):
學員姓名
所任職務
聯系電話
電子郵件
 
 
 
 
 
 
 
 
 
 
 
 
 
備 注——
1、收到貴公司報名信息后,我們將第一時間和貴公司參會聯系人確認培訓事宜。
2、開課前兩周,我們將為您發送《培訓確認函》,將培訓地點交通路線及酒店預訂、培訓報到指引等事項告知與您。
3、本課程也可以安排培訓講師到貴公司進行企業內訓,歡迎來電咨詢及預訂講師排期。
4、聯系咨詢電話:010-62278113  13718601312;聯系人:李先生;郵件:25198734@qq.com。
企業培訓導航
·按培訓課題:
·按培訓時間:
·按培訓地點:
年度培訓計劃
企業培訓年卡
培訓積分兌換禮品
精品研修項目
免費索取管理資料

網站動態 | 廣告服務 | 免責聲明 | 網站地圖 | 關于我們 | 聯系我們
企業培訓網致力于為客戶提供優質培訓服務!推動企業進步,助力企業騰飛!
客服電話:010-62278113  QQ:25198734  網站備案:京ICP備06027146號