巨量資料技術與應用Big Data Technology and Application

資訊管理學系陳士杰老師

課程簡介Introduction

國立聯合大學 資訊管理學系 巨量資料課程 (陳士杰)

大綱

了解本課程授課重點、目標及課程設計

了解本課程進行方式

了解本課程評分標準

課程進行時的注意事項

2

國立聯合大學 資訊管理學系 巨量資料課程 (陳士杰)

參考書籍

【請善用網路免費資源】3

課程網頁：http://debussy.im.nuu.edu.tw/sjchen/BigDataSpark_final.html

教師網頁：http://web.nuu.edu.tw/~sjchen

國立聯合大學 資訊管理學系 巨量資料課程 (陳士杰)

課程重點

本課程系統化介紹巨量資料與

Spark相關技術原理、基本運作

模式、以及巨量資料在相關領域

的應用

各單元安排了入門級的實作，讓

學生更有效地學習和掌握巨量資

料概念與Spark相關技術

4

國立聯合大學 資訊管理學系 巨量資料課程 (陳士杰)

課程進行之注意事項

本課程期望做到理論與實務兼備。在實務應用方面分成

環境設定與實務操作兩大部份，並輔以詳細文字說明，

以手把手的方式帶領學生一步步實作，而教師課堂授課

時僅重點式簡要說明操作程序，讓學生能有更多時間上

機操作。

教師在實作環境設定各單元時，皆有將各單元裝畢之環

境製作成VirtualBox之匯出映像檔(*.ova)。若學生在操作

本單元時，一直有問題無法解決，請下載此.ova檔並匯入

到VirtualBox，即可建立該單元需裝畢之操作環境。

學生自我學習時，各項軟體請勿一昧安裝“最新版本”，應

以“穩定版本”與“適配版本”為主。

5

國立聯合大學 資訊管理學系 巨量資料課程 (陳士杰)

課程目標

…

方法論之研究

財金科技之應用

商業決策之應用

物聯網之應用

生物科技之應用

各領域之基礎知識

巨量資料技術與應用基礎平台

6

國立聯合大學 資訊管理學系 巨量資料課程 (陳士杰)

7

■ 課程設計

分為“課程講授”、“上機練習”和“專題實作”三部分。

課程講授：

課堂講授巨量資料與Spark的相關技術原理及應用

上機練習：

分成環境設定與實務操作兩種

專題實作：(三選一)

實務操作講義變化：由本教材實務操作講義單元9之整合實作進行

專題設計。(專題成績60~80分)

其它來源實務操作變化：自行尋找其它文章所提供之實務操作，進

行專題設計與實作，務必註明並附上來源資料。 (專題成績75~90分)

自擬研究專題：自行尋找相關論文或資料，應用所學到的技術分析

該資料。此論文或資料不可有詳細操作步驟，可以是研究生進行中

的論文，務必註明並附上來源資料以供佐証。 (專題成績80~95分)

國立聯合大學 資訊管理學系 巨量資料課程 (陳士杰)

8

■ 評分標準

一次小考：20%

專題實作報告：60%

期末報告繳交頁數為20頁以內(Word檔與PDF檔皆需附上)。

報告內容：

這個題目的主題、研究動機與主要處理的問題

現有文獻對此方面的研究 (若有的話)

該專題所採用的工具、技術、分析方法與進行過程為何(請手把手說

明之)，及範例說明

討論與心得(彙整歸納你對此專題進行的個人心得，包含對於研究題

目的認識，工具與分析方法的認知)

若有時間將會安排口頭報告/demo，若無則以期末報告取代。

平時成績：20%