O documento discute o uso de bancos de dados NoSQL na globo.com. Ele descreve o tráfego e infraestrutura do site, características de bancos de dados relacionais e não-relacionais, e exemplos de bancos orientados a documentos, chave-valor e grafos. Apresenta também conceitos de Big Data e a abordagem de "persistência poliglota" adotada pela empresa.

1. NoSQL
na
globo.com
Camila Dias <cdias@corp.globo.com>
Rio Info, setembro 2014

2. +45 milhões de UVs
+3.8 bilhões de PageViews
+93 milhões de horas navegadas
+250 milhões de vídeos
Fonte: ComScore - Jul/14
Em 1 mês …

3. Estrutura
+2000 servidores
+350 databases
+30 times
16 DBA's

4. NoSQL
termo genérico
para designar
qualquer banco de dados
não-relacional

5. Bancos
Relacionais

6. BDs Relacionais
Surgem na década de 70
Dominaram o mercado
por 30 anos

7. Características
Dados na forma de tabelas
Joins entre tabelas
SQL é linguagem padrão
Forte controle de transações
Mensagens
Id Post u_id
1 timãoo 1
2 golaço 1
3 uhuuu 2
Usuários
Id Nome email
1 João joao@..
2 Maria mary@..
3 José jose@..

8. Pontos Fracos
Scale Up
Modelo pouco flexível
Foram feitos para trabalhar
centralizados
Clusters são caros e
$$$
complexos

9. Explosão de dados
Fonte: http://bit.ly/1BGNt6A

10. NoSQL

12. Características NoSQL
Não usam SQL
Schema dinâmico
Open Source
Horizontalmente escaláveis
Scale-out

13. Trade-offs
Sist. Distribuídos
só garantem
simultaneamente
duas das três
propriedades
Teorema CAP

14. Diversos sabores
Documento
Chave-valor
Grafo
Colunas

15. Bancos orientados a
documentos

16. Bancos de Documentos
Mais popular: MongoDB
Dados armazenados como
documentos

18. POSTS {
"_id" : ObjectId("533d5c429937a2581d01d848"),
"liga" : “Liga da Globocom” ,
"data_criacao" : ISODate("2014-04-03T10:04:02.043Z"),
"mensagem" : “Começou o Jogo!!!!",
"time" : "Esportes FC",
"comentarios" : [ { "data_criacao" : ISODate("2014-04-03T10:29:39.750Z"),
"mensagem" : "verdade finalmente abriu",
"time" : “emuleke" } ,
{ "data_criacao" : ISODate("2014-04-03T10:29:39.750Z"),
"mensagem" : “estava com saudades",
"time" : “vascao_selecao” }
]
}

19. Bancos Chave-valor

20. Bancos chave-valor
Mais conhecidos: Redis, Amazon Dynamo
Modelo de dados: chave que se liga a um
conjunto de valores

23. Bancos de Grafos

24. Bancos de Grafos
Mais popular: Neo4j
Usamos Virtuoso
Dados representados por nós e
relações

25. PT
Cobertura de Eleições
Presidente
PSB
Cita
Cita
Filiada
Candidata
Candidata
através de
através de
Brasília Filiada

27. Bancos orientados por
colunas

28. Bancos de Colunas
Mais conhecidos: Hbase, Cassandra
Dados armazenados em colunas
Usados em projetos de big data

29. fonte: http://slidesha.re/X8gvfE

30. Big Data

31. BigData
conjunto de dados tão grandes
e complexos que torna-se
difícil processá-los com
tecnologias tradicionais

32. Big Data
Value Verocity
Fonte: www.datameer.com

33. Benefícios
Conhecer cada cliente
Design responsive
Oferta de conteúdo
Marketing digital inteligente

35. Desafios
Importar, armazenar, e
gerenciar
Análisar os dados
Aplicar ao negócio

36. Qual é a
melhor
solução?

37. Persistência Poliglota
cada problema tem uma tecnologia que
melhor o atende

38. Obrigada
Camila Dias
cdias@corp.globo.com
Banco de Dados - globo.com
Conheçam nossos projetos
opensource.globo.com
https://github.com/globocom/database-as-a-service
https://github.com/globocom/IWantToWorkAtGloboCom
http://www.slideshare.net/camilapdias