o que é big data e como pode influenciar nossas vidas
TRANSCRIPT
![Page 1: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/1.jpg)
O que é BIG DATA e como pode influenciar nossas vidas
VIRADA CIENTÍFICA 2015 – IME/USP
![Page 2: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/2.jpg)
Elaine Naomi Watanabe
Mestranda em Ciência da Computação no Instituto de Matemática e Estatística da Universidade de São Paulo (IME-USP)
Orientadora: Profa. Dra. Kelly Rosa Braghetto
Tema de Pesquisa: Gerenciamento de grandes volumes de dados em workflows científicos executados em nuvens computacionais
http://www.ime.usp.br/~elainew/
![Page 3: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/3.jpg)
BIG DATA
![Page 4: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/4.jpg)
ARMAZENAMENTO DE DADOS
![Page 5: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/5.jpg)
Vocês já contaram
quantas fotos tiravam
antigamente e
quantas tiram hoje
em dia?
![Page 6: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/6.jpg)
DADOS ESTATÍSTICOSDO NOSSO DIA A DIA
40 mil buscas por segundo
3,5 bilhões de buscas por dia
YOUTUBE
+ de 1 bilhão de usuários
+ de 100 milhões de horas de vídeo
assistidas por dia
![Page 7: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/7.jpg)
DADOS ESTATÍSTICOSDO NOSSO DIA A DIA
968 milhões usuários ativos por dia
(844 milhões via dispositivos móveis por dia)
1,49 bilhões usuários ativos por mês
+ de 40 bilhões de fotos compartilhadas
3,5 bilhões de likes por dia
80 milhões de fotos por dia
400 milhões de usuários ativos por mês
![Page 8: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/8.jpg)
DADOS ESTATÍSTICOSDO NOSSO DIA A DIA
300 bilhões de mensagens por dia
700 milhões de usuários por mês
Um usuário envia, em média, 43
mensagens por dia
+ de 500 milhões de tweets por dia
+ de 316 milhões de usuários ativos por
mês
![Page 9: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/9.jpg)
DADOS ESTATÍSTICOSDO NOSSO DIA A DIA
NÚMERO DE SITES NO MUNDO:
+ de 942,1 milhões de sites
NÚMERO DE CELULARES NO MUNDO:
+ de 7,5 bilhões de celulares
NÚMERO DE USUÁRIOS DA INTERNET:
+ de 3,2 bilhões de usuários
NÚMERO DE PESSOAS NO MUNDO:
+ de 7,2 bilhões de pessoas
![Page 10: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/10.jpg)
2,5 EXABYTES de dados por dia...
e esse número dobra a cada 40 meses
BIG DATA: The management revolution. A. McAfee e E. Brynjolfsson
![Page 11: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/11.jpg)
2,5 EXABYTES = 2,5 * 1024 PETABYTES = 2,5 * 1024 * 1024 TB = 2,5 * 1024 * 1024 * 1024 GB = 2,5 * 1024 * 1024 * 1024 * 1024 MB
Vamos analisar?
![Page 12: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/12.jpg)
≈2,7 milhões de HDs de 1TB
≈600 bilhões de DVDs de 4,7GB
≈2 trilhões de disquetes de 1,44MB
POR DIA!
são
![Page 13: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/13.jpg)
CRIAMOS MAIS DADOS POR SEGUNDO NA INTERNET DO QUE
ARMAZENAMOS EM TODA INTERNET NOS ÚLTIMOS 20 ANOS!
BIG DATA: The management revolution. A. McAfee e E. Brynjolfsson
![Page 14: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/14.jpg)
uma avalanche de dados
![Page 15: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/15.jpg)
uma ENORME avalanche de dados
![Page 16: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/16.jpg)
uma IMENSA avalanche de dados
![Page 17: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/17.jpg)
mas isso é BIG DATA?
![Page 18: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/18.jpg)
conjuntos de dados difíceis de se capturar, armazenar, analisar e
visualizar com as tecnologias atuais
BIG DATA
Data-intensive applications, challenges, techniques and technologies: A survey on Big Data. C.L. Philip Chen, Chun-Yang Zhang
![Page 19: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/19.jpg)
3V’s
3D Data Management: Controlling Data Volume, Velocity, and Variety.
Doug Laney (Gartner)
VOLUME
+
VARIEDADE
+
VELOCIDADE
![Page 20: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/20.jpg)
4V’s
Understanding Big Data. Paul Zikopoulos (IBM)
VOLUME + VARIEDADE + VELOCIDADE
+
VALOR ou
VARIABILIDADE ou
VIRTUAL
![Page 21: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/21.jpg)
5V’s
Why only one of the 5 Vs of big data really matters.
Bernard Marr (IBM)
VOLUME + VARIEDADE
+ VELOCIDADE
+
VERACIDADE
+
VALOR
![Page 22: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/22.jpg)
não existe uma definição exata pois
ela depende do domínio da aplicação
BIG DATA: The management revolution. A. McAfee e E. Brynjolfsson
![Page 23: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/23.jpg)
envolve captura, armazenamento, processamento, análise e
visualização de imensos volumes de dados
BIG DATA
![Page 24: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/24.jpg)
EXPLORANDO O BIG DATA
![Page 25: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/25.jpg)
DETECTAR MUDANÇAS ÚNICAS NA VIDA DAS PESSOAS
como a GRAVIDEZ
Mas como?
How Companies Learn Your Secrets http://www.nytimes.com/2012/02/19/magazine/shopping-
habits.html?_r=0
![Page 26: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/26.jpg)
suplementos : primeiras 20 semanas loções sem perfume: segundo trimestre sabão sem perfume e muito, muito algodão: Vai nascer logo!
padrão de comportamento...
![Page 27: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/27.jpg)
RECOMENDAÇÃO DE FILMES
Responsável por 75% das atividades de visualizações
The Science Behind the Netflix Algorithms That Decide What You’ll Watch Next
http://www.wired.com/2013/08/qq_netflix-algorithm/
Big Data Lessons From Netflix http://www.wired.com/insights/2014/03/big-data-lessons-netflix/
![Page 28: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/28.jpg)
criado graças à
análise de BIG DATA
Giving Viewers What They Want
http://www.nytimes.com/2013/02/25/business/media/for-house-of-cards-using-big-
data-to-guarantee-its-popularity.html?_r=0
![Page 29: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/29.jpg)
ENCONTRAR O PAR PERFEITO
Questionário “diferente”...
responsável por 4% dos novos
casamentos nos EUA
http://eharmony.com/
![Page 30: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/30.jpg)
Data science of love http://www.infoq.com/presentations/eharmony-hadoop
![Page 31: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/31.jpg)
PESQUISA COM
DESENVOLVEDORES JAVA
UM CLICK e descobriam
sobre a vida de cada um
Veja mais em:
Data Science – a vida real -
http://www.tailtarget.com/palestras-e-apresentacoes/
![Page 32: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/32.jpg)
SUA VIDA ONLINE...
![Page 33: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/33.jpg)
pode dizer se você é um bom candidato
para uma vaga
O big data antecipa a morte do currículo http://exame.abril.com.br/revista-exame/edicoes/1044/noticias/a-morte-do-curriculo
![Page 34: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/34.jpg)
pode dizer se você se divorciou
Driven by Data: Your Bank Can Predict Your Divorce
http://www.forbes.com/sites/techonomy/2011/11/15/driven-by-data-your-bank-can-predict-your-divorce/
![Page 35: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/35.jpg)
se você está desempregado
Tracking employment shocks using mobile phone data Jameson L. Toole, Yu-Ru Lin, Erich Muehlegger, Daniel Shoag, Marta C. González, David Lazer
![Page 36: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/36.jpg)
se seu namoro vai acabar
Algoritmo prevê, no Facebook, quando um namoro vai acabar http://exame.abril.com.br/tecnologia/noticias/algoritmo-preve-no-facebook-quando-um-
namoro-vai-acabar
![Page 37: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/37.jpg)
se a inflação vai subir nos próximos
meses
O que buscas no Google podem revelar sobre a inflação
http://exame.abril.com.br/economia/noticias/o-que-buscas-no-google-podem-revelar-sobre-a-inflacao
![Page 38: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/38.jpg)
se cabelo enrolado vai ser a tendência
para o próximo ano
Data Science – A Vida Real
http://www.tailtarget.com/palestras-e-apresentacoes/
![Page 39: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/39.jpg)
E O LADO RUIM?
![Page 40: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/40.jpg)
NSA Agência de Segurança
Nacional dos Estados Unidos
ESPIONAGEM
YOTTABYTES de dados capturados 1024 ZettaBytes = 1024 * 1024 ExaBytes = + de 1 trilhão de HDs de 1 TB ALVO = o mundo inteiro Fonte: http://www.forbes.com/sites/metabrown/2015/08/27/nsa-mass-surveillance-biggest-big-data-story/
![Page 41: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/41.jpg)
E O LADO BOM? E O LADO RUIM?
![Page 42: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/42.jpg)
Diagnóstico de doenças
DETECTAR DEPRESSÃO PÓS-PARTO
VIA FACEBOOK OU TWITTER Predicting Postpartum Changes in Emotion and Behavior via Social Media:
http://dl.acm.org/citation.cfm?id=2466447
Characterizing and Predicting Postpartum Depression from Shared
Facebook Data: http://dl.acm.org/citation.cfm?id=2531675
CONTER EPIDEMIAS HealthMap + ebola:
http://www.healthmap.org/ebola/#timeline
Veja mais em : http://exame.abril.com.br/tecnologia/noticias/conheca-o-
brasileiro-que-ajudou-a-conter-o-avanco-do-ebola
![Page 43: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/43.jpg)
Novas formas de ensinar e
aprender
• CRIAR CURSOS ONLINE
PERSONALIZADOS Veja mais em: https://www.ucl.ac.uk/public-policy/public-policy-
briefings/big_data_briefing_final.pdf
• ACOMPANHAR MUDANÇAS NA
VIDA DOS ESTUDANTES
UNIVERSITÁRIOS Veja mais em: http://vejasp.abril.com.br/materia/big-data-educacao/
![Page 44: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/44.jpg)
E A NOSSA PRIVACIDADE?
![Page 45: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/45.jpg)
CONSEGUIREMOS FUGIR DO MUNDO
DIGITAL?
![Page 46: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/46.jpg)
QUEREMOS CONSEGUIREMOS
FUGIR DO MUNDO DIGITAL?
![Page 47: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/47.jpg)
QUER SABER MAIS?
![Page 48: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/48.jpg)
cursos online Coursera:
https://www.coursera.org/courses?query=big%20data
Big Data em Saúde no Brasil (USP)
https://www.coursera.org/course/bigdatabrasil
EDX:
https://www.edx.org/course?search_query=big+data
Big Data University:
https://bigdatauniversity.com/
Udacity:
https://www.udacity.com/courses/data-science
Standford online:
http://online.stanford.edu/search/node/big%20data
![Page 49: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/49.jpg)
seus dados no google
Assuntos mais procurados no Google:
https://www.google.com/trends
Histórico de lugares visitados:
https://www.google.com.br/maps/timeline
Histórico de vídeos do Youtube:
https://www.youtube.com/feed/history
Seus assuntos preferidos:
https://www.google.com/settings/u/0/ads/aut
henticated
Histórico de buscas no Google:
https://history.google.com/history/
![Page 50: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/50.jpg)
tendências na computação
Gerenciamento híbrido de dados: Modelos convencionais (como SQL) e
não-convencionais (como NoSQL)
Computação Móvel
Internet das Coisas (IoT)
Computação em Nuvem
DATA SCIENCE Big Data + Inteligência Artificial +
Estatística + Computação + ...
![Page 51: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/51.jpg)
MUITO OBRIGADA! =D
![Page 52: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/52.jpg)
REFERÊNCIAS
![Page 53: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/53.jpg)
ESTATÍSTICAS DO YOUTUBE: http://www.youtube.com/yt/press/statistics.html ESTATÍSTICAS DO WHATSAPP: http://www.bbc.co.uk/newsbeat/article/30706412/whatsapp-record-number-of-messages-sent-each-day ESTATÍSTICAS DO GOOGLE: http://www.internetlivestats.com/google-search-statistics/ ESTATÍSTICAS DO INSTAGRAM: https://instagram.com/press/ ESTATÍSTICAS DO TWITTER: https://about.twitter.com/company ESTATÍSTICAS DO FACEBOOK: http://newsroom.fb.com/company-info/
![Page 54: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/54.jpg)
NÚMERO DE CELULARES NO MUNDO: https://gsmaintelligence.com/ NÚMERO DE PESSOAS NO MUNDO: http://www.census.gov/popclock/ NÚMERO DE USUÁRIOS DA INTERNET: http://www.internetlivestats.com/internet-users/ NÚMERO DE WEBSITES: http://www.internetlivestats.com/total-number-of-websites/
![Page 55: O que é BIG DATA e como pode influenciar nossas vidas](https://reader034.vdocuments.site/reader034/viewer/2022042706/587a15a71a28abb4238b529d/html5/thumbnails/55.jpg)
BIG DATA: ISSUES AND CHALLENGES MOVING FORWARD S. Kaisler, F. Armour, J.A. Espinosa, W. Money 3D DATA MANAGEMENT: CONTROLLING DATA VOLUME, VELOCITY, AND VARIETY Doug Laney DATA-INTENSIVE APPLICATIONS, CHALLENGES, TECHNIQUES AND TECHNOLOGIES: A SURVEY ON BIG DATA C.L. Philip Chen, Chun-yang Zhang BIG DATA: THE NEXT FRONTIER FOR INNOVATION, COMPETITION, AND PRODUCTIVITY James Manyika, Michael Chui, Brad Brown, Jacques Bughin, Richard Dobbs, Charles Roxburgh, Angela Hung Byers BIG DATA: THE MANAGEMENT REVOLUTION. A. Mcafee E E. Brynjolfsson