雲端數據分析應用 林志成

Kenny Lin 2016. 3

1

大綱

新興雲端系統架構

數位化進程與物聯網

大數據分析之概念

2

新興雲端系統架構

數位化進程與物聯網

大數據分析之概念

3

4

雲端運算 / 服務的基本概念

「雲端」通常是指「網路」

透過網路取得遠端電腦的服

務

雲端運算是一種概念，並非

只單一技術

5

如果雲端的概念老早就有，為何這幾年才開始夯？

電腦硬體的持續進步

虛擬化技術

分散式檔案系統

寬頻網路

個人智慧裝置 6

雲端運算的基本特徵

On-demand self-service : 使用者自行上網申請，立即使用

Broad network access: 所有的服務皆透過網路取得，支援各式

終端裝置

Resource pooling: 資源集中控管，根據需求自動調配

Rapid elasticity: 服務可隨時增減，甚或終止

Measured service: 服務使用量如同水電用量，隨時監控並充分

透明化

[1] NIST, 2012 7

雲端服務的種類

IaaS: 基礎資源服務（提供主機、儲存設備、頻寬）

Amazon (AWS) EC2, S3

中華電信HiCloud VM

PaaS: 平台服務（提供應用伺服器、網頁伺服器...）

Cloud Foundry

SaaS: 軟體應用服務（提供軟體產品服務）

Google Mail

Salesforce.com

8

雲端服務架構

9

新興雲端系統架構

數位化進程與物聯網

大數據分析之概念

10

物聯網（Internet of Things, IoT）

數位化的進程 (From atoms to bits)

11

數位化的進程

實體 (Atoms) 數位資料 (Bits) 結構化資料 (Structured data)

書籍 圖檔 圖書資料庫

報紙 膠卷 新聞資料庫

音樂 CD MP3

遞送包裹 Files Location data

生產線 Files ERP data

12

物聯網帶來的影響

從條碼，二維條碼，到 RFID（從「這種」到「這個」）

智慧型手機的推波助瀾！

Everything is being monitored, all the time !

eTag: 過路費、停車費、高速公路流量分析

Smart power network: 智慧電網

13

新興雲端系統架構

數位化進程與物聯網

大數據分析之概念

14

大數據（Big Data）的基本概念

在網際網路加上物聯網的時代，地球上幾乎所有

的事件與活動，都會伴隨著相關的數位紀錄（

也就是數位資料）

有效的解讀與分析這些海量的資料，會讓我們對

各種人類活動有更多面向，更深刻的認識

15

So, how Big we are talking about ???

16

17

Big Data 資料的種類

18

Activity Data 日常活動資料

網頁瀏覽紀錄

App 使用紀錄

通訊紀錄

消費記錄

欣賞音樂、影片紀錄

食衣住行育樂....一舉一動都有紀錄

19

Conversation Data 對話資料

電子郵件

即時通訊

語音通訊

社群討論

電話（錄音）

20

Photo and Video Data 影像資料

拍照 / 錄影 ⇒ 社群分享

監視器

線上直播平台

視訊會議 / 課程 存檔

YouTube 上傳影片

21

Sensor Data 感測器紀錄資料

衛星定位

環境偵測

空氣品質

水質

動作偵測

健康狀況偵測

22

The IoT Data 物聯網資料

23

Data Modeling and Analysis 資料模型化與分析

Text analysis 文本分析

Face recognition 臉部辨識

Voice analysis 語音分析

Sentiment analysis 情緒分析

Movement analysis 動作分析 24

大數據分析應用實例

庫存管理（整合RFID）

購物車分析 ⇒ 整合促銷、Coupon寄送

健康管理（整合智慧型穿戴裝置）

治安維護（犯罪預防、盜刷偵測）

趨勢分析與預測

交通管理 25

結 論

26

監測數據到雲端分析

27

28

29

References

NIST, The definition of cloud computing

Bernard Marr, <Big Data>

30

31