big data 現象，以及現象中的我們

Big Data 現象，以及現象中的我們

精誠集團 Etu 負責人蔣居裕 @fredchiang

[email protected]

September 10, 2014

2

Who am I？� 蔣居裕 Fred Chiang

Open xxx 的愛好者

資料價值的探索者

Etu 負責人

精誠集團產品創新中心副總經理

) Blog —《Fred 豢養的雲中象》http://fredbigdata.blogspot.tw all about Hadoop and Big Data 台灣少見以探討 Big Data 趨勢、技術、商業價值為主軸的專業部落格

3

•  Big Data 3V，運算時代的位移 •  從 Hadoop 發展簡史看 Big Data 現象 � •  Big Data 現象中的我們 •  結論：Big Data，我們正在跨越鴻溝

Agenda

4

Big Data 要處理的三個面向：3V

Volume 資料量�

Velocity 處理時效�

Variety 資料格式�

運算時代的位移：從 Super Computer 到 Commodity Server

5

從 Hadoop 發展簡史看 Big Data 現象

•  Google Paper X 3 •  Doug Cutting – Hadoop 之父� •  Yahoo! 的投入 •  Internet Companies 的 All-in� •  從一頭大象變成一座動物園，生意盎然 •  Enterprise 的驚覺 •  重點行業的發展

6

Big Data 現象 #1

處理與分析混為一談

7

Big Data 現象 #2

分析洞見的討論多於行動

8

Big Data 現象 #3

認為 Big Data 分析方法有別於

傳統的統計、資料探勘、機器學習

9

Big Data 現象 #4

認為非結構化資料可以直接分析

10

Big Data 現象 #5

認為 Big Data 就是要一切自動化

11

Big Data 現象 #6

認為關聯重於因果

(What > Why)

12

Big Data 現象中的我們 #1

鍛鍊問對問題的能力

13


組織資料科學團隊

14


現在就開始，長期增長數據報酬

15

1.   Early Market (早期市場) → 專案 (Project) 市場

2.   Bowling Alley (保齡球道) → 特定領域可重複銷售的解決方案 (Solution) 市場

3.   Tornado (龍捲風暴) → 標準化產品 (Product) 市場

4.   Main Street (康莊大道) → 系統 (System) 市場�

結論：Big Data，我們正在跨越鴻溝

Geoffrey Moore’s Technology Adoption Lifecycle

16

www.etusolution.com/esd2014

Oct. 8 (Wed) @台北君悅

17

謝謝�

www.etusolution.com [email protected] Taipei, Taiwan 318, Rueiguang Rd., Taipei 114, Taiwan T: +886 2 7720 1888 F: +886 2 8798 6069

Contact