課程介紹
關于舉辦 “Spark大數據處理與案例分析”高級工程師
實戰培訓班的通知
各有關單位：
當下是大數據時代，為構建大數據平臺，技術人員需要對分布式計算平臺有一定深入的理解和應用。MapReduce作為一個經典的分布式計算框架，已經廣為人知，且得到了廣泛的應用，但MapReduce自身存在很多問題，包括迭代式計算和DAG計算等類型的數據挖掘與機器學習算法性能低下，不能很好地利用內存資源，編程復雜度較高等。為了克服MapReduce的眾多問題，新型計算框架出現了。Spark已經被不少互聯網公司采用，大部分數據挖掘算法和迭代式算法在逐步MapReduce平臺遷移到Spark平臺中，包括阿里巴巴，騰訊，百度，優酷土豆，360，支付寶等互聯網公司已經在線上產品中使用spark，且取得了令人滿意的效果，另外，部分省份的運營商也正在嘗試使用spark解決數據挖掘和分析問題，部分銀行，如工商銀行，也正在嘗試spark平臺。因此中國軟件人才培訓中心決定開展“Spark大數據處理與案例分析高級工程師”實戰培訓班，本次培訓由北京中程偉業科技有限公司具體承辦，望相關單位收到通知后積極參加。相關培訓事宜如下：
一、培訓時間及地點
2018年12月18日---12月22日 北京（18日全天報到）
2019年01月15日---01月19日 杭州（15日全天報到）
二、課程目標
1、深入理解Spark計算原理和編程模型，掌握Spark Core和SparkSql、SparkStreaming等上層系統的結合方式
2、深入掌握SparkCore、SparkSql使用調優技巧
3、深入掌握SparkStreaming和SparkMllib使用和調優技巧
4、深入掌握Spark和其他組件的結合使用
5、了解Spark與MapReduce分布式計算模型的區別和各自適合的使用場景。
6、能夠使用java、python和scala進行spark應用開發（如果要講解三種語言開發spark，工作量會非常大，建議只講解一種（可以根據企業的要求來定，）
7、熟練使用spark、spark streaming、spark SQL、spark mllib
8、深入了解spark在大型互聯網的架構和使用場景
三、培訓對象
各地企事業單位大數據產業相關人員，運營商 IT信息化和運維工程師相關人員，金融業信息化相關人員，或對大數據spark感興趣的相關人員。
四、師資介紹
張老師：阿里大數據高級專家，國內資深的Spark、Hadoop技術專家、虛擬化專家，對HDFS、MapReduce、HBase、Hive、Mahout、Storm、spark和openTSDB等Hadoop生態系統中的技術進行了多年的深入的研究，更主要的是這些技術在大量的實際項目中得到廣泛的應用，因此在Hadoop開發和運維方面積累了豐富的項目實施經驗。近年主要典型的項目有：某電信集團網絡優化、中國移動某省移動公司請賬單系統和某省移動詳單實時查詢系統、中國銀聯大數據數據票據詳單平臺、某大型銀行大數據記錄系統、某大型通信運營商全國用戶上網記錄、某省交通部門違章系統、某區域醫療大數據應用項目、互聯網公共數據大云（DAAS）和構建游戲云（Web Game Daas）平臺項目等。
五、頒發證書
參加相關培訓并通過考試的學員，可以獲得：
工業和信息化部頒發的-《大數據開發高級工程師證書》。該證書可作為專業技術人員職業能力考核的證明，以及專業技術人員崗位聘用、任職、定級和晉升職務的重要依據。注：請學員帶二寸彩照2張（背面注明姓名）、身份證復印件一張。
六、培訓特色
本課程基于最新的spark 2講解，內容涵蓋了企業中大數據處理的四大場景：
離線批處理、流式計算、SQL處理、機器學習。Spark是一個廣泛應用的分布式內存計算模型，旨在大幅提升的迭代算法和交互低延遲數據挖掘的性能。Spark更適合于迭代運算比較多的ML和DM運算，one stack rule them all！Spark號稱一個平臺可以適合所有的應用，如SparkSql可以處理結構化數據，SparkStreaming旨在提供實時的計算能力，而SparkMllib則提供了豐富機器學習算法庫。
七、培訓費用及須知
培訓費6800元。（含培訓費、資料費、考試費、證書費、講義光盤費等）。需要住宿學員請提前通知，可統一安排，費用自理。
八、培訓大綱
九、報名回執
“SPARK大數據處理與案例分析高級工程師”報名回執表
聯 系 人：劉 丹 13269683561 （微信）
薄志華 13911777530（微信）
郵 箱：liudan@govmade.cn
數邦客