資策會•數位教育研究所
   
       
 
 
         
   
★ 最夯的Hadoop就在這裡!                               
Big Data之處理與分析實務班

《2019/3/9~3/10 假日班開課》2019/2/27前享早鳥優惠

 
課程源起

        雲端運算掀起了新一代的資訊革命,也帶來了資訊爆炸式的成長,市調單位IDC的研究報告指出:自2010年全球資料量已進入ZB(zettabytes,1 ZB 為1兆GB)時代,並且每年以60%的速度攀升,這意味著每18個月全球的資料量將翻倍。面對不斷擴張的驚人資料量,大量資料 (Big Data) 的儲存、管理、處理、搜尋、分析與智能應用等處理資料的能力也將面臨新的挑戰,而處理資料的技術將迫切需要可動態與彈性等特點,以支援大量資料處理的計算模式。

       雲端運算使得分散式運算技術成了新顯學,整合MapReduce演算法並被各大企業所廣泛採用的Hadoop套件,更是開發雲端運算技術的佼佼者,它是用來處理與保存大量資料的雲端運算平台,全球各大IT企業(如:雅虎、IBM等)無不積極投資與推廣此一計算模式,並被作為雲端運算環境中的重要基礎軟件。有了Hadoop軟體平台後,可以進行各項分析,如:電信業者可以分析手機在基地台漫遊的特性,提供更好的在地費率;信用卡業者可以每天定期分析各種信用貸款所產生的風險,動態調整信貸利率;便利超商可以分析消費者的購買習慣,動態調整架上存貨數量;甚至新興產業如生醫資訊、智慧電網等,皆可運用Hadoop平台來進行資料探勘與趨勢預測。  

       根據市場調查機構IDC的研究顯示,Hadoop 軟體市場的復合年增長率超過了60%,並預測到了2016年,市場總值將由2011年的7700萬美元增長至8.128億美元,可見得Hadoop火熱的程度。若您的企業有儲存或分析海量資料的需求,或者面臨資料庫過度龐大,正在尋求分散式資料庫或資料倉儲的技術,那Hadoop將是一個已通過商業驗證的選擇。只要懂得駕馭Hadoop這隻大象,它將能駝著您爬過一座座資料大山,幫您理出隱藏在群眾中的邏輯。

更多相關資訊請按此參考「 大數據主題館」

 課程目標

       本課程學員將學習到雲端運算之三大關鍵技術,及利用Hadoop之分散式檔案系統(HDFS)與MapReduce,來快速建構出雲端運算的執行環境和服務,包含實體安裝與docker虛擬化安裝之實作方式讓學員了解如何透過Hadoop架構進行雲端資料的大量資料(Big Data)處理、分析與實務應用。

 課程特色

       本課程旨在建立雲端運算之大量資料(Big Data)處理、分析、應用的根基,讓參訓學員瞭解正確的觀念與方法,重點並不在講解程式設計的細節,而在於透過採體驗式教學方式的實作,經由指令剪貼方式來體驗實際的操作方式,以從體驗中驗證課程所學。

       由於 Hadoop 是採用 Java 語言撰寫,對於許多不熟悉 Java 語言的學員來說有相當大的入門障礙,因此本課程額外介紹可與其他語言介接的 Hadoop Streaming 方法,並以實際的案例說明如何讓Hadoop 與現存的應用程式(如 Shell Script、C 語言撰寫的執行檔、PHP Script、Python Script 等)進行整合實作,期能讓學員學會如何將 Hadoop 這項技術與現存資訊架構進行整合。

 適合對象
  • IT經理或系統網路部門主管
  • 專案經理、系統架構師或系統網路管理人員
  • 企業或技術決策人員
  • 對於雲端運算之 大數據處理、分析、應用有興趣者
 預備知識
具 Linux 操作實務
 課程大綱
課程單元
課程主題
時數

1.HadoopHadoop Ecosystem 簡介

1.1巨量資料簡介

1.2巨量資料與虛擬化
1.3
為何需要使用Hadoop

1.4 Hadoop簡介與Hadoop Ecosystem

14

2.Hadoop叢集設定與安裝解說

2.1 安裝環境簡介

2.2 Hadoop叢集安裝與設定

2.3 Hadoop資料流(ETL)實務應用

2.4 Hadoop與資料分析實務應用


3.HDFS介紹

3.1 HDFS概論
3.2
存取HDFS與相關操作

3.3資料查詢視覺化操作與應用
3.4 Hive
操作與 ETL 實務應用介紹


4.MapReduce介紹

4.1 MapReduce 概論
4.2 MapReduce
運作原理解說
4.3
Java based MapReduce 程式
4.4
Hadoop Streaming 進行資料處理

* 課程執行單位保留調整課程內容與講師之權利

 課程日期

2019/3/9(六)~3/10(日),每日9:00~12:30、13:30~17:00,計兩天、14小時。

 上課地點

資訊工業策進會 數位教育研究所, 台北市信義路三段153號10樓。
上課地點位於捷運大安站。上課地點與教室之確認,以上課通知函為主。

  報名方式
本課程採線上報名,請按右方【我要報名】進入報名系統。

按此連至線上報名網址
下載DM

課程諮詢:(02)6631-6533 吳經理,E-mail:fionawu@iii.org.tw
報名繳費:(02)6631-6535 郭小姐,E-mail:florakuo@iii.org.tw

 課程費用與繳費
1. 本課程費用 NT$10,000元,費用含課程、講義、餐點。
2. 凡於2019/2/27前完成報名及繳費,享早鳥優惠價 NT$8,000元 (含稅)。
3.

團報優惠:兩人團報可打95折、四人團報可打9折優惠。

團報優惠與早鳥優惠可一併使用。
課程報名系統每個帳號僅提供一位學員報名,若為團報學員,每位皆必須完成線上報名,並於其他金額說明欄位註記「與XXX一起團報」,以利核對名單。

4. 課程若未如期開班,費用將全額退還。
報名確認與取消
1. 已完成報名與繳費之學員,課程主辦單位將於開課三天前以E-mail方式寄發上課通知函;若課程因故取消或延期,亦將以E-mail方式通知,如未收到任何通知,敬請來電確認。
2. 已完成繳費之學員,若於開課前8天(含)內欲取消報名,請於開課日前以書面通知業務承辦人,主辦單位將退還90%課程費用。
3. 學員於培訓期間如因個人因素無法繼續參與課程,將依課程退費規定辦理之︰上課未逾總時數三分之一,欲辦理退費,可退還所有課程費用二分之一;上課逾總時數三分之一,則不退費。
4. 課程執行單位保留是否接受報名之權利。
 ◆ 餐點服務
本課程上課期間,每天都會提供午餐,學員不需自行準備或額外付費。
 ◆ 結業證書
依本會ISO品質系統之「教育訓練服務程序」規定,本課程為短期班,參訓學員缺課未超過總時數五分之一者,結業時由本會核發結業證書。
 ◆ 學習護照
策會為人事行政局首批認證審定之民間學習機構,參加本課程之中小企業員工,亦可獲得「中小企業終身學習護照」認可之時數;此外,公務人員參加資策會課程,學習時數可登錄「公務人員終身學習護照」。
◆ 相關課程推薦

   
         
     

資訊工業策進會 數位教育研究所    版權所有,禁止侵害,違者必究。
Copyright (c) 2013 III Digital Education Institute. All Rights Reserved