big data: why, what, paradigm shifts enabled , tools and market landscape

28
BigData Big Data: an introduc/on Emanuele Della Valle DEIB Politecnico di Milano [email protected] h>p://emanueledellavalle.org

Upload: emanuele-della-valle

Post on 20-Aug-2015

481 views

Category:

Internet


1 download

TRANSCRIPT

BigData Big  Data:    

an  introduc/on  

Emanuele  Della  Valle  DEIB  -­‐  Politecnico  di  Milano  [email protected]  h>p://emanueledellavalle.org    

BigData

Agenda  •  Why  now?  •  Its  value  •  What  is  it?  •  Paradigm  shiFs  enabled  •  Tools  •  Market  Landscape  

29/09/2014   h>p://emanueledellavalle.org   2

BigData

Why  now?  1/5  

29/09/2014   h>p://emanueledellavalle.org   3

BigData

Why  now?  2/5  

[sou

rce:  M

cKinsey,  2011]  

29/09/2014   h>p://emanueledellavalle.org   4

Hard-­‐drive  are  becoming  cheaper  

We  are  all  data  producers  

We  do  it  on  a  regular  basis  

Data  are    growing  faster  than  IT  spending  Data  gets  

cumulated  …  

…  everywhere  

BigData

Why  now?  3/5  

[source:  h>p://www.intel.com/newsroom/bigdata/]  29/09/2014   h>p://emanueledellavalle.org   5

We  do  it  on  a  regular  basis  

BigData

Why  now?  4/5  

29/09/2014   h>p://emanueledellavalle.org   6 [sou

rce:  h>p://www.go-­‐gulf.com/blog/60-­‐secon

ds/]  

BigData

Why  now?  5/5  

29/09/2014   h>p://emanueledellavalle.org   7 [sou

rce:  h>p://www.go-­‐gulf.com/blog/60-­‐secon

ds-­‐v2/]  

BigData

Its  value  1/3  

29/09/2014   h>p://emanueledellavalle.org   8

BigData

Its  value  2/3  

[source:  McKinsey,  2011]  

29/09/2014   h>p://emanueledellavalle.org   9

healthcare  

Public  Administra/ons  

Personal  loca/on  

BigData

Its  value  3/3  

[source:  McKinsey,  2011]  

29/09/2014   h>p://emanueledellavalle.org   10

margin  

jobs  

skills  

BigData

…  so  what's  Big  Data?  

[source:  IBM,  2012]  

Analysis  of  the  answers  of  

1144  responders  from  

organiza/ons  that  run  Big  

Data  projects    

29/09/2014   h>p://emanueledellavalle.org   11

BigData

Characteris/cs  1/5  

[source:  IBM,  2012]  29/09/2014   h>p://emanueledellavalle.org   12

BigData

Characteris/cs  2/5  

[source:  IBM,  2012]  29/09/2014   h>p://emanueledellavalle.org   13

BigData

Characteris/cs  3/5  

[source:  IBM,  2012]  29/09/2014   h>p://emanueledellavalle.org   14

BigData

Characteris/cs  4/5  

[source:  IBM,  2012]  

the  one  certainty  about  uncertainty

 

is  that  it  is  not  likely  to  go  away  

29/09/2014   h>p://emanueledellavalle.org   15

BigData

Characteris/cs  5/5  

[source:  IBM,  2012]  

29/09/2014   h>p://emanueledellavalle.org   16

BigData

Paradigm  ShiFs  Enabled  1/3  

[source:  Marc  Andrews,  2014]  

Leverage  more  of  the  data  being  captured  

29/09/2014   h>p://emanueledellavalle.org   17

BigData

Paradigm  ShiFs  Enabled  1/3  

29/09/2014   h>p://emanueledellavalle.org   18

Reduce  effort  required  to  leverage  data    

[source:  Marc  Andrews,  2014]  

BigData

Paradigm  ShiFs  Enabled  2/3  Data-­‐driven  explora/on  looking  for  correla/on  

29/09/2014   h>p://emanueledellavalle.org   19 [source:  Marc  Andrews,  2014]  

BigData

Paradigm  ShiFs  Enabled  3/3  Leverage  data  as  it  is  captured  

29/09/2014   h>p://emanueledellavalle.org   20 [source:  Marc  Andrews,  2014]  

BigData

Tools  1/4  

29/09/2014   h>p://emanueledellavalle.org   21

BigData

Tools  2/4  

29/09/2014   h>p://emanueledellavalle.org   22

BigData

Tools  3/4  

29/09/2014   h>p://emanueledellavalle.org   23

BigData

Tools  4/4  

29/09/2014   h>p://emanueledellavalle.org   24

BigData

Market  Landscape  

[source:  Ma>  Turck  (@ma>turck)  and  Su/an  Dong(@su/andong]  29/09/2014   h>p://emanueledellavalle.org   25

BigData

Market  Landscape  

[source:  Ma>  Turck  (@ma>turck)  and  Su/an  Dong(@su/andong]  29/09/2014   h>p://emanueledellavalle.org   26

Infrastructure  Analy/cs  

Applica/ons  

Cross  Infrastructure  Analy/cs  

Open  Source  

Data  Source  

BigData

Credits  •  Big  Data:  the  next  fron/er  for  innova/on,  compe//on,  and  

produc/vity.  McKinsey  Global  Ins/tute.  May,    2011.  –  h>p://www.mckinsey.com/insights/business_technology/big_data_the_next_fron/er_for_innova/on    

•  Analy/cs:  The  real-­‐world  use  of  big  data.  IBM  Ins/tute  for  Business  Value  In  collabora/on  with  Saïd  Business  School  at  the  University  of  Oxford.  2012  –  h>p://www-­‐03.ibm.com/systems/hu/resources/the_real_word_use_of_big_data.pd    

•  �Big  Data  &  Analy/cs:  Next  Genera/on  Architecture  and  Capabili/es.  Marc  Andrews,  2014  –  h>ps://www.ibm.com/partnerworld/wps/servlet/RedirectServlet?cmsId=isv_ast_smp_ecosystem-­‐

webcasts&a>achmentName=Data_Warehouse_deck.pdf    

•  Hype  Cycle  for  Big  Data,  2012.  Gartner,  2012  –  h>ps://www.gartner.com/doc/2100215/hype-­‐cycle-­‐big-­‐data-­‐    

•  Big  Data  Landscape,  version  3.0.  Ma>  Turck,  and  Su/an  Dong,  2014  –  h>p://pt.slideshare.net/mjF01/big-­‐data-­‐landscape-­‐ma>-­‐turck-­‐may-­‐2014    

29/09/2014   h>p://emanueledellavalle.org   27

BigData Thank  you!  

Any  Ques/on?  

Emanuele  Della  Valle  DEIB  -­‐  Politecnico  di  Milano  [email protected]  h>p://emanueledellavalle.org