經濟部工業局•開放資料(Open Data)應用推動計畫
資策會•數位教育研究所•科技化服務(ITeS)中心
   
       
 
 
         
   
★ 工業局負擔50%費用,培訓資料處理之專業人才!
雲端Big Data之處理與分析實務班
5/3 確定開課,4/22前報名享工業局補助50%優惠!
◆ 課程源起

隨著資訊科技進步,現在全世界的資料累積的速度遠遠超過企業所能處理的速度,當資料的數量正呈爆炸性的成長,再加上巨量資料運算技術日趨成熟、Open Data觀念的興起,資料本身將成為最有價值的資產。目前政府正大力推動開放資料 (Open Data),大量資料授權開放出來後,民間及企業就可以用相關資料處理分析技術,應用於資料發展及加值,造成社會的創新。

Open DataBig Data浪潮的驅動下,面對不斷擴張的驚人資料量, 巨量資料 (Big Data) 的儲存、管理、處理、搜尋、分析與智能應用等處理資料的能力也將面臨新的挑戰,而處理資料的技術將迫切需要可動態與彈性等特點,以支援大量資料處理的計算模式,使得分散式運算技術成了新顯學,整合MapReduce演算法並被各大企業所廣泛採用的Hadoop套件,更是Big Data技術中的佼佼者,它是用來處理與保存大量資料的雲端運算平台,全球各大IT企業(如:雅虎、IBM等)無不積極投資與推廣此一計算模式,並被作為雲端運算環境中的重要基礎軟件。有了Hadoop軟體平台後,可以進行各項分析,如:電信業者可以分析手機在基地台漫遊的特性,提供更好的在地費率;信用卡業者可以每天定期分析各種信用貸款所產生的風險,動態調整信貸利率;便利超商可以分析消費者的購買習慣,動態調整架上存貨數量;甚至新興產業如生醫資訊、智慧電網等,皆可運用Hadoop平台來進行資料探勘與趨勢預測。

根據市場調查機構IDC的研究顯示,Hadoop 軟體市場的復合年增長率超過了60%,並預測到了2016年,市場總值將由2011年的7700萬美元增長至8.128億美元,可見得Hadoop火熱的程度。若您的企業有儲存或分析海量資料的需求,或者面臨資料庫過度龐大,正在尋求分散式資料庫或資料倉儲的技術,那Hadoop將是一個已通過商業驗證的選擇。只要懂得駕馭Hadoop這隻大象,它將能駝著您爬過一座座資料大山,幫您理出隱藏在群眾中的邏輯。

為了滿足業界需求,資策會規劃「Open Data / Big Data之處理與分析實務班」課程,本課程學員將學習到雲端運算之三大關鍵技術,及利用Hadoop之分散式檔案系統(HDFS)與MapReduce,來快速建構出雲端運算的執行環境和服務,並以實作方式讓學員了解如何透過Hadoop架構進行雲端資料的大量資料處理、分析與應用。

更多相關資訊請按此參考「資料科學家課程主題館」

 ◆ 課程目標

本課程學員將學習到雲端運算之三大關鍵技術,及利用Hadoop之分散式檔案系統(HDFS)與MapReduce,來快速建構出雲端運算的執行環境和服務,並以實作方式讓學員了解如何透過Hadoop架構進行雲端資料的大量資料(Big Data)處理、分析與應用。

 ◆ 課程特色
本課程旨在建立雲端運算之大量資料(Big Data)處理、分析、應用的根基,讓參訓學員瞭解正確的觀念與方法,重點並不在講解程式設計的細節,而在於透過採體驗式教學方式的實作,經由指令剪貼方式來體驗實際的操作方式,以從體驗中驗證課程所學。

由於 Hadoop 是採用 Java 語言撰寫,對於許多不熟悉 Java 語言的學員來說有相當大的入門障礙,因此本課程額外介紹可與其他語言介接的 Hadoop Streaming 方法,並以實際的案例說明如何讓Hadoop 與現存的應用程式(如 Shell Script、C 語言撰寫的執行檔、PHP Script、Python Script 等)進行整合實作,期能讓學員學會如何將 Hadoop 這項技術與現存資訊架構進行整合。

 ◆ 適合對象
  • IT經理或系統網路部門主管
  • 專案經理、系統架構師或系統網路管理人員
  • 企業或技術決策人員
  • 對於雲端運算之大量資料(Big Data)處理、分析、應用有興趣者
 ◆ 預備知識
具 Linux 操作實務與 Java 程式語言基礎者尤佳。
 ◆ 課程大綱
課程單元
課程主題
時數
巨量資料的
趨勢與挑戰
  • What:何謂巨量資料?
  • Why:為何需要關切巨量資料?
  • When:何時導入巨量資料技術?
  • How:巨量資料三大因應策略?
  • Who:誰是巨量資料成功關鍵?
1

巨量資料的
架構與技術

  • Data Manipulation 資料操控
  • Data Analysis 資料分析
  • Data Visualization 資料視覺化
  • Data Mining 資料探勘
  • Data Discovery 資料鑑識
1

Hadoop 介紹

  • Hadoop 的源起介紹
  • Hadoop 的專業術語
  • 實作一:Hadoop 單機安裝
2.5
HDFS 介紹
  • 什麼是HDFS?
  • HDFS 觀念與指令解說
  • 實作二:HDFS 操作實務
2.5
MapReduce介紹
  • MapReduce 簡介
  • MapReduce 程式設計入門
  • 實作三:MapReduce 範例操作
2

Hadoop 叢集

  • Hadoop 叢集安裝設定解說
  • Hadoop 叢集佈署工具
  • 實作四:Hadoop程式編譯實務
1

Hadoop 相關專案

  • Hadoop 相關專案(1) Hadoop Streaming
  • 實作五:Hadoop Streaming 操作練習
  • Hadoop 相關專案(2) - Pig
  • 實作六:Pig Latin 操作練習
  • HBase 操作觀察
  • Hadoop 示範應用 - 抓抓龍(Crawlzilla)
  • 實作七:抓抓龍安裝操作(示範)
4

* 課程執行單位保留調整課程內容與講師之權利

 ◆ 課程日期
2014 年5月3日~5月4日(週六、日)上課,每日9:00~12:30、13:30~17:00,計二天、14 小時。
 ◆ 上課地點

資訊工業策進會 數位教育研究所, 台北市信義路三段153號10樓。
上課地點位於捷運大安站1號出口左轉約20公尺(燦坤樓上)。
* 上課地點與教室之確認,以上課通知函為主。

 ◆ 報名方式

本課程採線上報名,請按【我要報名】進入報名系統 (依據工業局人才培訓專案規範,接受補助之學員須完整填具學員基本資料表並於開課當天簽署一份「工業局個資告知同意書」,否則無法接受補助。)

我要報名

下載報名表

課程諮詢:(02)6631-6533 課程經理 黃小姐,或E-mail:julie620@iii.org.tw
報名確認:(02)6631-6536 邱小姐,E-mail:mg9401@iii.org.tw
 ◆ 課程費用與繳費
1. 本課程費用 NT$10,000元,費用含課程、講義、餐點
2. 本課程由工業局負擔50%費用,凡於2014年422前完成報名並填寫繳費資料者,可享補助價 NT$5,000 元(含稅)。 (優惠價以一般產業在職員工為主,政府機構人員及學校任職員工不在補助範圍內)
3. 團報優惠:兩人團報可打95折、四人團報可打9折優惠。
4. 課程若未如期開班,費用將全額退還。
5. 特殊身份優惠:如為「身心障礙者、原住民、低收入戶、中堅企業員工」等特殊身份學員,享有經濟部工業局負擔70%之優惠,前三者學員需提供政府機關核發之身份證明文件影本,中堅企業員工需提供在職證明文件影本,請參中堅企業名單中堅企業躍升計畫介紹
6. 請以信用卡或即期支票支付—
  以信用卡支付者:請務必將正確信用卡資料填寫於繳費方式資料表。
以即期支票支付者:抬頭為「財團法人資訊工業策進會」, 劃線並禁止背書轉讓
  ,以掛號寄至台北市106信義路三段153號9樓之1 邱小姐 收。
◆ 報名確認與取消
1. 已完成報名與繳費之學員,課程主辦單位將於開課三天前以E-mail方式寄發上課通知函;若課程因故取消或延期,亦將以E-mail方式通知,如未收到任何通知,敬請來電確認。
2. 已完成繳費之學員,若於開課前8天(含)內欲取消報名,請於開課日前以書面通知業務承辦人,主辦單位將退還80% 課程費用。
3. 學員於培訓期間如因個人因素無法繼續參與課程,將依課程退費規定辦理之︰上課未逾總時數三分之一,欲辦理退費,可退還剩餘費用二分之一;上課逾總時數三分之一,則不退費。
4. 課程執行單位保留是否接受報名之權利。
5. 如遇不可抗拒之因素,課程主辦單位保留修訂課程日期及取消課程的權利 。
 ◆ 餐點服務
本課程上課期間,每天都會提供餐點,學員不需自行準備或額外付費。
 ◆ 結業證書
依本會ISO品質系統之「教育訓練服務程序」規定,本課程為短期班,參訓學員缺課未超過總時數五分之一者,結業時由本會核發結業證書。(本計畫課程需參加並通過課程評量,才可取得結業證書。)
 ◆ 學習護照

資策會為人事行政局首批認證審定之民間學習機構,參加本課程之中小企業員工,亦可獲得「中小企業終身學習護照」認可之時數;此外,公務人員參加資策會課程,學習時數可登錄「公務人員終身學習護照」。

 ◆ 招生及最低人數
最低招生人數至少為10人,預計開班人數為25人。

   
         
     

資訊工業策進會 數位教育研究所    版權所有,禁止侵害,違者必究。
Copyright (c) 2013 III Digital Education Institute. All Rights Reserved