tietoyhteiskuntasektorin huippuseminaari 8.10.2013 helsingissä, aiheena "osaamisen revoluutio...
DESCRIPTION
Immo Salon esitys Liikenne- ja viestintäministeriön järjestämässä Tietoyhteiskuntasektorin huippuseminaarissa 8.10.2013 (Hotelli Presidentti, Helsinki).TRANSCRIPT
© Ivorio 2013
Ivorion missio
Ivorio on Pohjoismaiden johtava riippumaton big data -asiantuntija.
Autamme asiakkaitamme ratsastamaan tiedon vallankumouksen aallonharjalla.
Osaamisen
Elämme keskellä tiedon vallankumousta
revoluutio
“Cloud Computing” ja “Big Data”
Google-haun “big data” suosio
© Ivorio 2013
Google-haun “cloud computing” suosio
© Ivorio 2013
Pilvipalvelut ilmiö vuodesta 2007
“McCarthy:
“
If computers of the kind I have advocated become the computers of the future, then computing may someday be organized as a public utility just as the telephone system is a public utility…
The computer utility could become the basis of a new and important industry.
Puhe MIT:n tilaisuudessa v. 1961
© Ivorio 2013
Pilvipalvelumarkkinoiden koko
Lähde: Liikenne- ja viestintäministeriön selvitys v. 2013, IDC, Gartner
Vuosi Markkinoiden koko Suomessa(koko pilvimarkkina)
Markkinoiden koko maailmassa(public cloud)
2015 380 milj.€ 60 mrd €
2014 275 milj.€ 47 mrd €
2013 195 milj.€ 37 mrd €
2012 140 milj.€ 30 mrd €
... ... ...
2009 ??? 3 mrd €
Julkisten pilvipalveluiden (public cloud) markkinoiden vuotuinen kasvu välillä 2012-2015 n. 26 %
Pilvipalveluiden markkinoiden (kaikki pilvipalvelut) vuotuinen kasvu Suomessa välillä 2012-2015 n. 40 %
40 %
vuodessa
26 % vuodessa
© Ivorio 2013
Big data ilmiö vuodesta 2011
Mistä big datassa on kysymys?1. Volume
Tietoa (dataa) on koko ajan enemmän. Se pitäisi pystyä tallentamaan ja hyödyntämään.
2. VelocityTietoa (dataa) tulee koko ajan nopeammin. Päätöksiä pitäisi pystyä tekemään nopeasti.
3. VarietyTietoa (dataa) tulee kiihtyvällä tahdilla erilaisista lähteistä, eikä se istu hyvin nykyisiin toimintamalleihin
Veracity, Value Virality, Validity, Viscosity… myös muita V-kirjaimia on jälkeenpäin lisätty kuvaamaan ilmiötä.
Ensimmäisenä tämän esitti META Group, jonka Gartner osti vuonna 2005
© Ivorio 2013
Organisaation hallussa tai
saatavilla oleva data (ERP, CRM,
DW, RDBMS)
Datan alkuperä
Datan alkuperä
© Ivorio 2013
Digitaalinen todellisuus(internet, sosiaalinen media)
Organisaation hallussa tai
saatavilla oleva data (ERP, CRM,
DW, RDBMS)
Datan alkuperä
© Ivorio 2013
Digitaalinen todellisuus(internet, sosiaalinen media)
Fyysinen todellisuus(sensorit, esineiden internet)Organisaation
hallussa tai saatavilla oleva data (ERP, CRM,
DW, RDBMS)
Datan alkuperä
© Ivorio 2013
Saatavilla olevat datavarannot(avoin data, datamarkkinat)
Digitaalinen todellisuus(internet, sosiaalinen media)
Fyysinen todellisuus(sensorit, esineiden internet)Organisaation
hallussa tai saatavilla oleva data (ERP, CRM,
DW, RDBMS)
Datan alkuperä
© Ivorio 2013
Saatavilla olevat datavarannot(avoin data, datamarkkinat)
Potentiaalinen data(ei vielä kerätä)
Digitaalinen todellisuus(internet, sosiaalinen media)
Fyysinen todellisuus(sensorit, esineiden internet)Organisaation
hallussa tai saatavilla oleva data (ERP, CRM,
DW, RDBMS)
“Accenture:
Räjähdysmäisesti kasvavat tietomäärät avaavat uusia mahdollisuuksia ja potentiaalisia kilpailuetuja monilla aloilla ja monissa yrityksissä.
“
© Ivorio 2013
Kuinka suuret ovat big data -markkinat?
Yleisin luku on välillä 15-50 mrd €
○ IDC sanoo (12/2012), että vuonna 2016 markkinoiden koko on n. 26 mrd $
○ Gartner sanoo (10/2012), että vuonna 2012 big data -markkinat olivat n. 28 mrd $
○ Wikibon ennustaa (02/2012), että big data -markkinat ovat vuonna 2015 n. 54 mrd $
○ McKinseyn raportissa (05/2011) arvioitiin big datan vuotuisen lisäarvo- ja kustannussäästöpotentiaalin olleen jo vuonna 2011 arviolta 1 000 mrd €
© Ivorio 2013
Koska big data -hankkeet aloitetaan Suomessa?
Julkishallinnon organisaatiot“Big data -selvitys, 09/2013”
© Ivorio 2013
“McKinsey, 2011:
By 2018, the United States alone could face a shortage of 140,000 to 190,000 people with deep analytical skills.
“
© Ivorio 2013
Big datan teknologiat
● Hadoop (tunnetuin yksittäinen uusi teknologia)
● Appliancet (valmisratkaisut)
● In-memory -analytics, NoSQL (muotiteknologioita)
● Pilvipalvelut ja big data
○ Amazon (Hadoop)○ Google (Dremel, Hadoop)○ Microsoft (Hadoop)
© Ivorio 2013
© Ivorio 2013
Datan tallentaminen pilvessä
Amazon, Google, Microsoft
© Ivorio 2013
Dataa yht. Amazon (S3) Google Storage Microsoft Azure Storage
< 1 TB 0.095 $ 0.085 $ 0.095 $
< 50 TB 0.080 $ 0.076 $ 0.080 $
< 500 TB 0.070 $ 0.063 $ 0.070 $
< 1000 TB 0.065 $ 0.063 $ 0.065 $
< 5000 TB 0.060 $ 0.054 $ 0.055 $
Mitä maksaa gigatavun tallentaminen per kuukausi julkisessa pilvessä?
Kustannussäästöt eivät ole olennaisin asia pilvipalveluissa!
“McKinsey:
By 2009, nearly all sectors in US economy had at least an average of 200 terabytes of stored data per company with more than 1 000 employees.
“
© Ivorio 2013
Mainitun 200 TB:n tallentaminen julkiseen pilveen maksaa n. 1.3 milj. $ nykyhinnoin.Iso raha, mutta suhteutettuna suuren yrityksen liikevaihtoon mitätön.
© Ivorio 2013
Datan hyödyntäminen pilvessä
Datan analysoiminen pilvessä
© Ivorio 2013
Terasortin maailmanennätys Googlen pilvipalvelussa:
MapR (Hadoop-jakeluyritys):“Benchmark broke the one minute barrier with 1,003 servers, 4,012 cores and 1,003 disks as compared to the previous record set by Yahoo. The prior documented record of 62 seconds was set by Yahoo running Apache Hadoop on 1,460 servers, 11,680 cores and 5,840 disks.”
Mitä maailmanennätys maksoi?
Datan analysoiminen pilvessä
© Ivorio 2013
Terasortin maailmanennätys Googlen pilvipalvelussa:
“Since the servers used in MapR’s world record were virtually instantiated in the Cloud, the cost estimate for running the TeraSort was about $9 compared to the over $5M estimate to run the previous record.”
joustavuudesta!
Tästä on kysymys:
$ 9 vs. $ 5 000 000
Hadoopin asema big data -ilmiössä
Hadoop
Tiedon määrä
Tied
on r
aken
teis
uus
2 Tb1 Gb 20 Tb 200 Tb
Nearly all sectors in the US economy had at least an average of 200 terabytes of stored data per company with more than 1,000 employees.McKinsey 2011
By 2015, 65 percent of packaged analytic applications with advanced analytics will come embedded with Hadoop.Gartner 2013
© Ivorio 2013
Hadoop-työpaikkojen tarjonta
© Ivorio 2013
Lähde: Indeed.comTyöpaikat pääasiassa Yhdysvalloissa
Hadoop Suomessa
© Ivorio 2013
Käyttäjiä v. 2013 mm.
Käyttäjiä lähitulevaisuudessa
Rovio
Sanoma
Supercell
Vähittäiskauppa
Teollisuus
Telekommunikaatio
MediaPalvelualat
Hadoop-koulutus Suomessa
© Ivorio 2013
Ivorio Oy
© Ivorio 2013
Missä on tilaisuus pilvipalveluissa?
“Amazon, vuosikertomus 1997:
Amazon.com passed many milestones in 1997: by year-end, we had served more than 1.5 million customers, yielding 838% revenue growth to $147.8 million, and extended our market leadership despite aggressive competitive entry.
“
© Ivorio 2013
Googlen tutkimus- ja tuotekehitysmenot
© Ivorio 2013
Vuosi Investoinnit tutkimus- ja tuotekehitykseen
2012 6 800 milj. $
... …
2004 226 milj. $
2003 91 milj. $
2002 32 milj. $
2001 17 milj. $
2000 11 milj.$
“Pienelle maalle tämä juna meni jo aikaa sitten. Ei toivoa kilpailla.”
Esimerkkejä luvuista: Amazon ja Google
© Ivorio 2013
Nettoinvestoinnit teknologiaan (palvelimet yms.)
Yritys Nettoinvestoinnit Taserivi Liikevaihto
Amazon 1 655 milj. $Technology and content
+ 13 016 milj. $
Google 1 657 milj. $Information technology assets
+ 8 134 milj. $*
*) Motorola-kauppaa ei mukana tässä
“Investoinnit ovat suuria, mutta liiketoiminnan kasvu monin verroin suurempi. Palvelinkeskukset ovat databisneksen raaka-ainetta, bulkkia.”
© Ivorio 2013
Mitä kannattaisi tehdä?
“Uusi Nokia?
Microsoft osti Nokian puhelinliiketoiminnan.Kauppahinta 5.4 mrd €
YLE 3.9.2013
“
© Ivorio 2013
“Vai uusi Skype?
Microsoft osti Skypen.Kauppahinta 6.1 mrd €
YLE 10.5.2011
“
© Ivorio 2013
Ehdotuksia
© Ivorio 2013
1. Avoin data
2. Koulutus
3. Rahoitus ja investointien kannustaminen
4. Julkiset hankkeet
Tiedon vallankumous avaa runsaasti uusia mahdollisuuksia!
© Ivorio 2013
Avataan datavarannot ja siirretään data-aineistoja mahdollisuuksien mukaan keskeisiin pilvipalveluihin
Lisäksi pohditaan aktiivisesti, mitä dataa voitaisiin alkaa keräämään ja tuomaan saataville.
1. Avoin data:Suomesta avoimen datan edelläkävijä
2. Koulutus:tavoitteena keihäänkärkiosaaminen
© Ivorio 2013
Lisätään pilvipalveluihin ja big dataan liittyvien avainteknologioiden koulutusta ja nopeasti:
○ Keskeiset pilvipalvelut (Amazon, Google, Microsoft, Salesforce)
○ Hadoop + ekosysteemi
Lisäksi koordinoidaan eri yliopistojen ja muiden tahojen koulutustarjontaa niin, että vältetään liiallinen päällekkäisyys ja edesautetaan osaamisen kumuloitumista
Selvitystyö?
© Ivorio 2013
Kohdennetaan rahoitusta voimakkaammin aloittavien ja pk-yritysten tukemiseen innovaatiovauhdin kiihdyttämiseksi ja uusien menestystarinoiden nostamiseksi
Lisäksi luodaan mahdollisimman otolliset olosuhteet investoida Suomeen mm. uusien palvelinkeskusten muodossa
3. Rahoitus ja investoinnit:luodaan ympäristön menestymiselle
© Ivorio 2013
Keihäänkärkihankkeita ja pilotteja rohkeasti liikkeelle
Lisäksi pyritään kartoittamaan ja poistamaan markkinoiden kehittymisen esteet
Tavoitteet: selkeä lainsäädäntö, osaavan työvoiman saaminen maahan helppoa, yrittäjyydelle myönteinen ilmapiiri
4. Julkiset hankkeet:innovatiivista riskinottoa ja rohkeutta