O documento discute como a AWS facilita o Big Data e a computação em nuvem. Ele explica como a AWS oferece armazenamento elástico na nuvem para coleta e armazenamento de dados, processamento flexível para ETL com instâncias elásticas, e serviços como DynamoDB e EMR para buscas, machine learning e visualização de relatórios de forma escalonável e sem manutenção.

1. Big Data e Computação em
Nuvem na AWS
José Papo
AWS Tech Evangelist
@josepapo

3. Onde se vê Big Data
Marketing e
Mídia/ Instituições Jogos
Óleo e Gás Varejo Telecom Segurança
Propaganda Financeiras (sobretudo
social)
Analise
Anti-virus Comporta-
Anuncios Simulações mental
Recomen-
dações de Monte
Dirigidos Carlo
Cobrança
Log de
Análise Detecção Análise de
Ligações
Sismica de Fraudes Uso
Uso dos
Processa- Produtos
mento de Análise de Análise de
vídeos e Transações Riscos Reconheci-
imagens mento de
Métricas
Imagens “In-game”

4. Coleta e Storage
Processamento e ETL
Buscas e Machine Learning
Visualização e Relatórios

5. Coleta e Storage
Processamento e ETL
Buscas e Machine Learning
Visualização e Relatórios

7. Relacional NoSQL

9. Como Cloud facilita
Coleta e Storage?

10. Storage Elástico no Amazon S3
1
Trilhão
762 Bilhões
262 Bilhões
102 Bilhões
14 Bilhões 40 Bilhões
Q4 2007 Q4 2008 Q4 2009 Q4 2010 Q4 2011 Q2 2012

11. 288 servidores com Cassandra
1.100.000 transações / segundo
41 dólares / hora
(Instâncias Reservadas)
Benchmarking Cassandra Scalability on AWS - Over a million writes per second

12. DynamoDB é um Banco de
Dados NoSQL “as a service”
sem complexidades
Sirva níveis gigantescos de tráfego e requisições
Armazene e recupere qualquer quantidade de dados
Custos mínimos de administração
Sem instalações de software
Não é necessário configurar clusters

17. Coleta e Storage
Processamento e ETL
Buscas e Machine Learning
Visualização e Relatórios

18. "Hadoop é um storage confiável e um sistema analítico"
HDFS MapReduce

21. Como Cloud facilita
Processamento e ETL?

22. Elasticidade
Data Warehouse
(Processo Batch)
Data Warehouse Data Warehouse
(Estável) (Estável)
Diminui
Aumenta para
para 25 9
instancias instancias

23. Implantar um cluster hadoop é difícil
http://eddie.niese.net/20090313/dont-pity-incompetence/

24. +

33. Elastic MapReduce, DynamoDB e Hive
http://docs.amazonwebservices.com/ElasticMapReduce/latest/DeveloperGuide/EMRforDynamoDB.html

35. Coleta e Storage
Processamento e ETL
Buscas e Machine Learning
Visualização e Relatórios

38. Como Cloud facilita
Buscas e Machine
Learning?

42. Coleta e Storage
Processamento e ETL
Buscas e Machine Learning
Visualização e Relatórios

46. Como Cloud facilita
Visualização e
Relatórios?

49. Casos de utilização de
Big Data na Nuvem

55. 3 Horas
por $4828,85/hora

57. OFERTA GRATUITA!
aws.amazon.com/pt/free
awshub.com.br

59. OBRIGADO!
aws.typepad.com/brasil
slideshare.net/AmazonWebServicesLATAM
José Papo
AWS Tech Evangelist
@josepapo