云計算與大數據處理技術培訓(北京,7月28-30日)
【舉辦單位】北京曼頓培訓網
【培訓日期】2016年7月28-30日
【培訓地點】北京
【培訓對象】系統架構師、系統分析師、高級程序員、資深開發人員;牽涉到海量數據處理的機構數據中心運行、規劃、設計負責人;云服務運營服務提供商規劃負責人;高校、科研院所牽涉到大數據與分布式數據處理的項目負責人。
【培訓要點】
今天、隨著IT規模越來越大、數據規模呈幾何級數增長、已經超出了傳統技術方法所能解決的范疇。為此、人們把目光轉向了剛剛興起的云計算、希望通過云計算來實施海量數據處理解決方案、實現以更小的成本來處理更大規模數據的目標、并成為目前云計算應用所面對的極大挑戰。本課程基本思想如下:
1、目前、"云計算"已經不是一個剛剛流行的時髦概念了、在一些傳統IT方法顯得無能為力的場合、云計算正在開始大展拳腳、表現了強大的解決問題的能力、海量數據存儲與處理正是屬于這種場合。我們如何在云計算分布式環境下正確設計大數據量數據模型?如何在設計中解決資源、效率、安全性、可靠性等一系列極難平衡的問題?如何通過云計算幫助我們解決在傳統IT技術中看似解決不了的敏感問題?這些都是我們在云計算架構設計中需要深入研究的鍵問題。
2、理解問題最好的方法是分析成功案例、本課程分別從多個角度分析在面對海量數據處理的困難時、不同的應用體系是如何解決問題并獲得成功的。研究這些已有的體系不是目的、而是希望學員能夠通過學習這些解決問題的方法和思路、通過歸納整理深入理解、再根據自己所面對的領域特征、形成解決具體實際問題的方案。這也是讓云計算在海量數據處理領域真正發揮作用的有效途徑。
3、云計算是一種服務、在云計算應用架構設計中、就必須考慮作為服務與普通的產品設計有哪些不同?需要考慮的產品的服務特征有哪些?如何搭建面向不同層次、合適的服務平臺?在這個過程中、我們需要考慮哪些問題?有哪些成功的案例?有些什么解決方案?
4、云計算應用最重要的問題是安全問題。安全不是一個后期需要解決的獨立問題、而是在前期就需要投入巨大精力來考慮的產品策略。可以說、安全性與可用性是云計算能否順利實施與應用的關鍵點、也是云計算架構設計的關鍵因素。我們應該如何考慮安全問題?如何解決諸如數據安全、網絡安全、主機安全、數據管理以及災難恢復等一系列問題?如何制定合適的安全性與可用性策略?在實踐中有什么經驗和教訓?
5、為了把傳統數據中心改造為基于云計算的服務系統、虛擬化是一個重要手段。我們必須深入研究虛擬化技術是如何實現的。虛擬化技術有哪幾個層面的問題?如何正確應用虛擬化技術來實現把基礎設施向服務轉型?各種虛擬化技術有些什么優點?有哪些陷阱?如何規劃技術解決方案?如何正確進行云計算體系結構設計?
本課程不是一個泛泛的理論性、概念性的介紹課程、而是針對問題討論解決方案的深入課程。教師對于上述領域有深入的理論研究與實踐經驗、在課程中將會針對這些問題與學員一起進行研究、在關鍵點上還會搭建實驗環境進行實踐研究、以加深對于這些解決方案的理解。通過本課程學習、希望推動國內云計算項目開發上升到一個新水平。
【學員基礎】
1、對IT系統設計有一定的理論與實踐經驗。
2、數據倉庫與大數據處理有一定的基礎知識。
【培訓目標】
1,深入理解通過云計算實現海量數據處理的思想、方法與實踐。
2,理解安全性和可用性設計的問題、方法與實踐。
3,掌握把傳統數據中心改造成云計算中心的技術與方法。
4,掌握虛擬化技術的核心技術方法以及應用特征。
【課程大綱】
第一講 云計算的概念與現狀
1、云計算的概念
2、云計算發展現狀
3、云計算實現機制
4、云計算的發展環境
5、云計算的優勢
第二講 從Google云計算體系、理解海量數據處理的方法
1、如何構建海量存儲文件系統?
■GFS系統架構
■GFS容錯機制
■GFS系統管理技術
■MapReduce產生背景
■MapReduce編程模型
■MapReduce實現機制
■MapReduce案例分析
2、如何提供鎖服務解決分布式數據一致性問題?
■Chubby的設計思路
■Chubby中的Paxos算法
■Chubby文件系統
3、如何建立規模龐大的高性能表結構?
■BigTable設計目標
■BigTable系統架構
■BigTable服務器
■BigTable性能優化
4、如何建立高可用性和高可擴展性的數據系統?
■Megastore設計目標
■Megastore數據模型
■Megastore事務及并發控制
■Megastore基本架構
■Dapper監控系統
■Dapper關鍵性技術
■Dapper工具
第三講 從Hadoop云計算項目、進一步研究云數據處理方法
1、HDFS:高可靠性處理機制及應用
■Hadoop項目簡介
■HDFS體系結構
■HDFS關鍵運行機制
■Hadoop vs Google
■Hadoop API
■Hadoop環境搭建
2、HBASE:龐大、極其稀疏的可擴展性數據模型
■Hbase簡介
■HBase的運行機制
■HBase與 HDFS
■HBase的對外接口
■ZooKeeper的數據模型
■ZooKeeper的讀寫機制
■ZooKeeper的使用方法
第四講 從Windows Azure、理解平臺即服務的本質
1、微軟云計算平臺
2、微軟云操作系統Windows Azure
3、微軟云關系數據庫SQL Azure
4、Azure AppFabric
5、Azure Marketplace
第五講 從Amazon云計算、討論如何提供云服務
1、Dynamo基礎存儲架構
2、彈性計算云EC2
3、簡單存儲服務S3
4、簡單隊列服務SQS
5、簡單數據庫服務Simple DB
6、關系數據庫服務RDS
7、內容推送服務CloudFront
第六講 實施云計算的關鍵點:安全策略
1、云計算安全是一個必須前期重視的策略
2、云計算的特征與安全挑戰
3、云計算的安全體系與關鍵技術
4、基礎架構云安全框架
5、云計算安全平臺
第七講 當前數據中心如何向云計算環境轉變?
1、VMware云產品
2、云管理平臺 vCenter
3、vCloud Service Director
4、VMware的網絡和存儲虛擬化
5、主流商業云計算解決方案比較
6、主流開源云計算系統比較
7、國內代表性云計算平臺比較
第八講 基礎設施即服務(IaaS、關鍵實現技術
1、IaaS技術體系概述
2、服務器虛擬化技術
■CPU虛擬化
■內存虛擬化
■I/O虛擬化
3、存儲虛擬化技術
■存儲系統概述
■存儲設備層的存儲虛擬化
■塊聚合層的存儲虛擬化
■文件/記錄層的存儲虛擬化
4、主機網絡虛擬化
第九講 軟件即服務(SaaS、關鍵實現技術
1、SaaS技術概述
2、呈現層技術綜述
3、調度層技術
■基于DNS的調度
■基于虛擬IP的調度
■基于鏈路聚合的調度
■基于應用的調度
■調度策略
4、業務層
5、數據層
6、用戶管理和配置管理
7、用戶體驗的設計
8、課程總結
【講師介紹】
楊老師,曼頓培訓網()資深講師。
主要研究網絡信息分析以及云計算相關技術、長期從事通信網管系統、網絡信息處理、商務智能(BI)以及電信決策支持系統的研究開發工作、主持和參與了多個國家和省部級基金項目、具有豐富的工程實踐及軟件研發經驗。
雷老師,曼頓培訓網)資深講師。
國內知名企業云平臺技術負責人、中國云親身實踐者。
【費用及報名】
1、費用:培訓費5500元(含培訓費、講義費);如需食宿,會務組可統一安排,費用自理。
2、報名咨詢:鮑老師
3、報名流程:電話登記-->填寫報名表-->發出培訓確認函
4、備注:如課程已過期,請訪問我們的網站,查詢最新課程
5、詳細資料請訪問北京曼頓培訓網:(每月在全國開設四百多門公開課,歡迎報名學習)
楊老師,曼頓培訓網()資深講師。
主要研究網絡信息分析以及云計算相關技術、長期從事通信網管系統、網絡信息處理、商務智能(BI)以及電信決策支持系統的研究開發工作、主持和參與了多個國家和省部級基金項目、具有豐富的工程實踐及軟件研發經驗。
雷老師,曼頓培訓網)資深講師。
國內知名企業云平臺技術負責人、中國云親身實踐者。
系統架構師、系統分析師、高級程序員、資深開發人員;牽涉到海量數據處理的機構數據中心運行、規劃、設計負責人;云服務運營服務提供商規劃負責人;高校、科研院所牽涉到大數據與分布式數據處理的項目負責人。
更新時間:2016/5/25 8:58:15