大數據Log收集與分析實作

訓練目標

本課程學員將學習大數據平台Hadoop與 Elasticsearch，利用Hadoop之分散式檔案系統(HDFS)，快速建構出數據運算的執行環境，並透過Hive進行數據查詢提供分析報表。Elasticsearch主要用來快速查詢數據，也透過ESHadoop與Hadoop進行數據串聯。相信Hadoop與 Elasticsearch整合與實作方式讓學員更加了解如何透過進行大數據處理、分析與應用。

課程特色

1.Hadoop 簡介
1.1 Hadoop 系統介紹與偽虛擬化安裝
1.2 HDFS 指令操作回顧
1.3 Hive 介紹與指令操作回顧

2.Elasticsearch簡介
2.1 Elasticearch 系統介紹與偽虛擬化安裝
2.2 Elasticsearch指令操作回顧
2.3 Kibana、Head 等 Plugin 系統介紹與安裝

3.ETL 簡介
3.1 Dispatcher 程式介紹
3.2 即時寫入Log 資料
3.3 ESHadoop操作

4.資料分析
4.1 Hive進行資料分析
4.2 Kibana 視覺網頁

詳細內容請參考課程網址：http://www.iiiedu.org.tw/ites/BDLOG.htm

開課資訊