cientista de dados - a profissão mais sexy do século 21
TRANSCRIPT
![Page 1: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/1.jpg)
Cientista de Dados
Rodrigo Senra
rsenra@a
cm.org
A profissão mais sexy do século 21
![Page 2: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/2.jpg)
Apenas um rapaz latino americano...
• Engenheiro de Software • GPr Sistemas (11 anos)
• HI Tecnologia (5 anos)
• Professor Universitário - PUC-Campinas (2 anos)
• Especialista - Globo.com (2 anos)
• Cientista Pesquisador - EMC2
• Engenheiro de Computação Grad-MSc-PhD IC-Unicamp
• Entusiasta de FLOSS(atuante na comunidade Python desde 2000)
![Page 3: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/3.jpg)
• Estudantes ?
• Professores ?
• Profissionais ?
• Cientistas de Dados ?
Quem está aqui ?
![Page 4: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/4.jpg)
Vamos falar de…• O dilúvio de dados
• Cientista de Dados
• Quem é
• O que faz
• Como faz
• Ferramentas
![Page 5: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/5.jpg)
Cientista de DadosRodrigo Senra
Quem é ?
Por que é importante ?
![Page 6: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/6.jpg)
![Page 7: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/7.jpg)
fONTE: IDC Digital Universe Study, patrocinado pela EMC, 2011
20090.8 Zettabytes CRESCIMENTO
DA INFORMAÇÃO
2020
44X
MAIOR35.2 ZB
IN 2010 THE DIGITAL UNIVERSE WAS
1.2 ZETTABYTES1,200,000,000,000,000,000,000
Zetta Exa Peta Tera Giga Mega Kilo Byte
fonte: http://thehumanfaceofbigdata.com/
![Page 8: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/8.jpg)
![Page 9: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/9.jpg)
• ︎Government-to-citizen (G2C)• Government-to-employee (G2E)• Government-to-business (G2B) • Government to-government (G2G)
![Page 10: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/10.jpg)
http://www.telegraph.co.uk/news/picturegalleries/picturesoftheday/2545407/Pictures-of-the-day-12-August-2008.html?image=8
![Page 11: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/11.jpg)
![Page 12: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/12.jpg)
Cientista de DadosRodrigo Senra
O que faz ?Quem é ?
![Page 13: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/13.jpg)
Data Science is a newly emerging field dedicated to analyzing and manipulating data to derive insights and build data products.
https://beta.oreilly.com/ideas/what-is-data-science
It combines skill-sets ranging from computer science, to mathematics, to art.
http://images.fineartamerica.com/images-medium-large-5/1-pi-transition-paths-martin-krzywinski.jpg
![Page 14: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/14.jpg)
![Page 16: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/16.jpg)
Estatísticas descritivas: ! Média vs. Mediana. ! Desvio Padrão ! Quartis, Min/Max. ! Correlação entre variavéis
1X y
10.00 8.048.00 6.95
13.00 7.589.00 8.81
11.00 8.3314.00 9.96
6.00 7.244.00 4.26
12.00 10.847.00 4.825.00 5.68
2x y
10.0 9.148.00 8.1413.0 8.749.00 8.7711.0 9.2614.0 8.106.00 6.134.00 3.1012.0 9.137.00 7.265.00 4.74
3x y
10.0 7.468.00 6.7713.0 12.79.00 7.1111.0 7.8114.0 8.846.00 6.084.00 5.3912.0 8.157.00 6.425.00 5.73
4x y
8.00 6.588.00 5.768.00 7.718.00 8.848.00 8.478.00 7.048.00 5.25
19.00 12.508.00 5.568.00 7.918.00 6.89
Média de x: 9Variância de x: 11
Média exata de y: 7.5 (2 d.p)Variância de y: 4.13 (to 2 d.p)
Correlação entre x e y : 0.816Regressão linear: Y = 3.00 + 0.500xTruth lies on statistics !
![Page 17: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/17.jpg)
![Page 18: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/18.jpg)
![Page 19: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/19.jpg)
![Page 20: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/20.jpg)
![Page 21: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/21.jpg)
![Page 22: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/22.jpg)
![Page 23: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/23.jpg)
![Page 24: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/24.jpg)
![Page 25: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/25.jpg)
![Page 26: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/26.jpg)
![Page 27: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/27.jpg)
![Page 28: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/28.jpg)
![Page 29: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/29.jpg)
Cientista de DadosRodrigo Senra
Como faz ?
![Page 30: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/30.jpg)
http://i0.wp.com/sciencereview.berkeley.edu/wp-content/uploads/2014/04/spring_2014_azam_05.jpg
![Page 31: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/31.jpg)
http://godwincaruana.me/data-science-workflow-overview-and-challenges-cacm/
![Page 32: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/32.jpg)
Big Data a cada passo da exploração de petróleo
Navigation
Seismic: Pre-stack
Seismic: Post-stackLog Curves
Culture Data
Geologic Model
Pressure Data
Velocity Data Interpretation
![Page 33: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/33.jpg)
Resolução de Problemas
Agrupamento
![Page 34: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/34.jpg)
![Page 35: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/35.jpg)
Fernando Perez, lead PI at BIDS and creator of IPython, demonstrates brain imaging analyses performed using the IPython Notebook, an interactive web-based computational environment. credit: Peg Skorpinski
![Page 36: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/36.jpg)
![Page 37: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/37.jpg)
![Page 38: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/38.jpg)
![Page 39: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/39.jpg)
![Page 40: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/40.jpg)
![Page 41: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/41.jpg)
![Page 42: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/42.jpg)
![Page 43: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/43.jpg)
https://www.kaggle.com
Kaggle is the world's largest community of data scientists. They compete with each other to solve complex data science problems, and the top competitors are invited to work on the most interesting and sensitive business problems from some of the world’s biggest companies through Masters competitions.
![Page 44: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/44.jpg)
![Page 45: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/45.jpg)
Tools Used By Competitors
![Page 46: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/46.jpg)
![Page 47: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/47.jpg)
![Page 48: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/48.jpg)
![Page 49: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/49.jpg)
![Page 50: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/50.jpg)
![Page 51: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/51.jpg)
http://www-bcf.usc.edu/~gareth/ISL/ http://www.greenteapress.com/thinkstats/thinkstats.pdf
![Page 52: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/52.jpg)
![Page 53: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/53.jpg)
![Page 54: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/54.jpg)
![Page 55: Cientista de Dados - A profissão mais sexy do século 21](https://reader034.vdocuments.site/reader034/viewer/2022042707/58f3762d1a28ab18368b4569/html5/thumbnails/55.jpg)
Obrigado a todos pela atenção.
Rodrigo Dias Arruda Senra http://rodrigo.senra.nom.br [email protected]
@rodsenra
As opiniões e conclusões expressas nesta apresentação são de exclusiva responsabilidade de Rodrigo Senra.
Não é necessário requisitar permissão do autor para o uso de partes ou do todo desta apresentação, desde que não sejam feitas alterações no conteúdo reutilizado e que esta nota esteja presente na íntegra no material resultante.
Imagens e referências para outros trabalhos nesta apresentação permanecem propriedade daqueles que detêm seus direitos de copyright. Agradecimento especial a Ana Oliveira e Diego Salomone que contribuíram com alguns slides de suas apresentações sobre o mesmo tema.