Spark大數據分析實務班

訓練目標

學習Hadoop儲存系統與資源管理框架及Spark In-Memory巨量資料相關關鍵技術，利用開源軟體Hortonworks快速建置分散式儲存平台HDFS與資源管理框架Yarn，並實際安裝Spark軟體元件於此平台上，利用此平台進行開發，藉由實際案例操作，讓學員能夠了解Spark核心技術、SparkSQL操作方式以及巨量資料應用程式實際開發與效能調教。

課程特色

1.Hadoop與Spark簡介及巨資平台安裝
2.Spark 簡介
2.1 巨量資料生態系統簡介
2.2 Spark相關軟體元件簡介
2.3 Spark 核心技術與RDD介紹介
3.Spark 技術實作
3.1 Spark的運行模式
3.2 Spark 互動式Shell使用介紹
3.3 如何載入資料並建立RDD
4.Spark SQL 技術實作
4.1 SparkSQL 操作介紹
4.2 從RDD到SparkSQL
4.3 Hive與SparkSQL綜合運用
5.Spark 核心技巧
5.1 運算叢集資源調教
5.2 Spark相關優化技巧
5.3 Spark設計模式案例分享
6.分組實戰演練

詳細內容請參考課程網址：http://www.iiiedu.org.tw/ites/SPARK.htm

開課資訊