SlideShare une entreprise Scribd logo
1  sur  18
Télécharger pour lire hors ligne
Big Data 
we’re inside
Roteiro 
1. O que não seria Big Data? 
2. O que poderia ser Big Data! 
3. Por que agora? 
4. Tecnologias 
5. Aplicações 
6. Tecnicas 
7. Big data x Business intelligence 
8. Problemas futuros 
9. Mercado de trabalho
O que não seria Big data? 
● Uma ferramenta 
● Algo novo 
● Um banco de dados gigante 
● Business Intelligence (B.I.) 
● Algo realizado ontem
O que poderia ser Big Data! 
● Algo grande (“Big”) 
● Algo não ordenado 
● Algo imediato 
● Algo interesante (Inúmeras utilidades) 
● Um desafio 
● Uma oportunidade
Porque agora? 
● Novos paradigmas 
● Rede banda larga mais acessível 
● Discos maiores e mais rápidos 
● Sistemas relacionais não foram feitos 
para armazenar tudo 
● Sistemas antigos não foram feitos 
pensando na escalabilidade
Tecnologias
Aplicações 
● Sistema de recomendações 
● Redes sociais 
● Análise de tráfego(web) 
● Dashboards 
● Sistemas de apoio a decisão
Sistemas de recomendações
Redes sociais
Análise de tráfego na rede 
IMAGENS
Técnicas utilizadas 
● Aprendizado de máquina 
● NPL 
● Map Reduce 
● Inteligência nos negócio(BI)
Aprendizado de máquina 
● Perfis de compras 
● Detecção de padrões na área hospitalar 
● Perfis de comportamento
Map Reduce 
● Técnica utilizada para processar 
paralelamente massas enormes de 
dados. 
● Divide o processamento baseado em 
conjuntos “chave => valor” que serão 
distribuidos para diversos computadores 
realizarem o processamento
Business Intelligence 
● Algo velho! 
● Diversas fontes de dados 
● Processos de ETL 
● Série de processos definidos para gerar 
informações e dar suporte a tomada de 
decisões 
● Apoio e suporte as hierarquias de uma 
empresa
Business Intelligence 
● Soluções OLAP x OLTP 
● Processos de ETL 
● Conceito 
o Fatos 
o Dimensões 
o Métricas
Problemas futuros 
● Invasão de privacidade 
● Segurança
Mercado de trabalho 
● Cientistas de dados 
o Estatísticos 
o Matemáticos 
o Cientistas da computação 
o Profissionais de BI
Obrigado! perguntas?

Contenu connexe

Tendances

Mini-Curso: Introdução à Big Data e Data Science - Aula 7 - Introdução à Ling...
Mini-Curso: Introdução à Big Data e Data Science - Aula 7 - Introdução à Ling...Mini-Curso: Introdução à Big Data e Data Science - Aula 7 - Introdução à Ling...
Mini-Curso: Introdução à Big Data e Data Science - Aula 7 - Introdução à Ling...Diego Nogare
 
Mini-Curso: Introdução à Big Data e Data Science - Aula 10 - Introdução ao HD...
Mini-Curso: Introdução à Big Data e Data Science - Aula 10 - Introdução ao HD...Mini-Curso: Introdução à Big Data e Data Science - Aula 10 - Introdução ao HD...
Mini-Curso: Introdução à Big Data e Data Science - Aula 10 - Introdução ao HD...Diego Nogare
 
Bigdata - Leandro Wanderley
Bigdata - Leandro WanderleyBigdata - Leandro Wanderley
Bigdata - Leandro WanderleyLeandro Couto
 
Big Data e Data Science - Tecnologia e Mercado
Big Data e Data Science - Tecnologia e MercadoBig Data e Data Science - Tecnologia e Mercado
Big Data e Data Science - Tecnologia e MercadoHélio Silva
 
Palestra big data_e_mineracao_dedados_5agosto13-versaoslideshare
Palestra big data_e_mineracao_dedados_5agosto13-versaoslidesharePalestra big data_e_mineracao_dedados_5agosto13-versaoslideshare
Palestra big data_e_mineracao_dedados_5agosto13-versaoslidesharepccdias
 
Big Data Analytics - Do MapReduce ao dashboard com Hadoop e Pentaho
Big Data Analytics - Do MapReduce ao dashboard com Hadoop e PentahoBig Data Analytics - Do MapReduce ao dashboard com Hadoop e Pentaho
Big Data Analytics - Do MapReduce ao dashboard com Hadoop e PentahoAmbiente Livre
 
Stream de dados e Data Lake com Debezium, Delta Lake e EMR
Stream de dados e Data Lake com Debezium, Delta Lake e EMRStream de dados e Data Lake com Debezium, Delta Lake e EMR
Stream de dados e Data Lake com Debezium, Delta Lake e EMRCicero Joasyo Mateus de Moura
 
Data science com python - frameworks e melhores práticas
Data science com python - frameworks e melhores práticasData science com python - frameworks e melhores práticas
Data science com python - frameworks e melhores práticasMarlesson Santana
 
OS CINCO Vs DO BIG DATA
OS CINCO Vs DO BIG DATAOS CINCO Vs DO BIG DATA
OS CINCO Vs DO BIG DATALeonardo Dias
 
Processamento e Análise de Dados em Tempo Real com Python, Kafka e ElasticSearch
Processamento e Análise de Dados em Tempo Real com Python, Kafka e ElasticSearchProcessamento e Análise de Dados em Tempo Real com Python, Kafka e ElasticSearch
Processamento e Análise de Dados em Tempo Real com Python, Kafka e ElasticSearchCicero Joasyo Mateus de Moura
 
Ciência de Dados: a revolução na tomada de decisões
Ciência de Dados: a revolução na tomada de decisõesCiência de Dados: a revolução na tomada de decisões
Ciência de Dados: a revolução na tomada de decisõesMarlesson Santana
 
Palestra: Big Data Open Source com Hadoop - FLISOL 2014 - Curitiba
Palestra: Big Data Open Source com Hadoop - FLISOL 2014 - CuritibaPalestra: Big Data Open Source com Hadoop - FLISOL 2014 - Curitiba
Palestra: Big Data Open Source com Hadoop - FLISOL 2014 - CuritibaMarcio Junior Vieira
 
Big Data na prática: como construir um Data Lake para análise de dados
Big Data na prática: como construir um Data Lake para análise de dadosBig Data na prática: como construir um Data Lake para análise de dados
Big Data na prática: como construir um Data Lake para análise de dadosCicero Joasyo Mateus de Moura
 
BigData, Datamining e NoSql - A Combinação Perfeita
BigData, Datamining e NoSql - A Combinação PerfeitaBigData, Datamining e NoSql - A Combinação Perfeita
BigData, Datamining e NoSql - A Combinação PerfeitaFranklin Dias
 
Ativando Inteligência com Big Data
Ativando Inteligência com Big DataAtivando Inteligência com Big Data
Ativando Inteligência com Big DataHélio Silva
 
Governança de Dados e Big Data
Governança de Dados e Big DataGovernança de Dados e Big Data
Governança de Dados e Big DataCarlos Barbieri
 

Tendances (20)

Palestra Introdução a Big Data
Palestra Introdução a Big DataPalestra Introdução a Big Data
Palestra Introdução a Big Data
 
Mini-Curso: Introdução à Big Data e Data Science - Aula 7 - Introdução à Ling...
Mini-Curso: Introdução à Big Data e Data Science - Aula 7 - Introdução à Ling...Mini-Curso: Introdução à Big Data e Data Science - Aula 7 - Introdução à Ling...
Mini-Curso: Introdução à Big Data e Data Science - Aula 7 - Introdução à Ling...
 
Mini-Curso: Introdução à Big Data e Data Science - Aula 10 - Introdução ao HD...
Mini-Curso: Introdução à Big Data e Data Science - Aula 10 - Introdução ao HD...Mini-Curso: Introdução à Big Data e Data Science - Aula 10 - Introdução ao HD...
Mini-Curso: Introdução à Big Data e Data Science - Aula 10 - Introdução ao HD...
 
Bigdata - Leandro Wanderley
Bigdata - Leandro WanderleyBigdata - Leandro Wanderley
Bigdata - Leandro Wanderley
 
Big data, e eu com isso?
Big data, e eu com isso?Big data, e eu com isso?
Big data, e eu com isso?
 
BigData
BigDataBigData
BigData
 
Big Data e Data Science - Tecnologia e Mercado
Big Data e Data Science - Tecnologia e MercadoBig Data e Data Science - Tecnologia e Mercado
Big Data e Data Science - Tecnologia e Mercado
 
Palestra big data_e_mineracao_dedados_5agosto13-versaoslideshare
Palestra big data_e_mineracao_dedados_5agosto13-versaoslidesharePalestra big data_e_mineracao_dedados_5agosto13-versaoslideshare
Palestra big data_e_mineracao_dedados_5agosto13-versaoslideshare
 
Big Data Analytics - Do MapReduce ao dashboard com Hadoop e Pentaho
Big Data Analytics - Do MapReduce ao dashboard com Hadoop e PentahoBig Data Analytics - Do MapReduce ao dashboard com Hadoop e Pentaho
Big Data Analytics - Do MapReduce ao dashboard com Hadoop e Pentaho
 
Stream de dados e Data Lake com Debezium, Delta Lake e EMR
Stream de dados e Data Lake com Debezium, Delta Lake e EMRStream de dados e Data Lake com Debezium, Delta Lake e EMR
Stream de dados e Data Lake com Debezium, Delta Lake e EMR
 
Data science com python - frameworks e melhores práticas
Data science com python - frameworks e melhores práticasData science com python - frameworks e melhores práticas
Data science com python - frameworks e melhores práticas
 
OS CINCO Vs DO BIG DATA
OS CINCO Vs DO BIG DATAOS CINCO Vs DO BIG DATA
OS CINCO Vs DO BIG DATA
 
Processamento e Análise de Dados em Tempo Real com Python, Kafka e ElasticSearch
Processamento e Análise de Dados em Tempo Real com Python, Kafka e ElasticSearchProcessamento e Análise de Dados em Tempo Real com Python, Kafka e ElasticSearch
Processamento e Análise de Dados em Tempo Real com Python, Kafka e ElasticSearch
 
Ciência de Dados: a revolução na tomada de decisões
Ciência de Dados: a revolução na tomada de decisõesCiência de Dados: a revolução na tomada de decisões
Ciência de Dados: a revolução na tomada de decisões
 
Palestra: Big Data Open Source com Hadoop - FLISOL 2014 - Curitiba
Palestra: Big Data Open Source com Hadoop - FLISOL 2014 - CuritibaPalestra: Big Data Open Source com Hadoop - FLISOL 2014 - Curitiba
Palestra: Big Data Open Source com Hadoop - FLISOL 2014 - Curitiba
 
Big Data na prática: como construir um Data Lake para análise de dados
Big Data na prática: como construir um Data Lake para análise de dadosBig Data na prática: como construir um Data Lake para análise de dados
Big Data na prática: como construir um Data Lake para análise de dados
 
BigData, Datamining e NoSql - A Combinação Perfeita
BigData, Datamining e NoSql - A Combinação PerfeitaBigData, Datamining e NoSql - A Combinação Perfeita
BigData, Datamining e NoSql - A Combinação Perfeita
 
Big data
Big dataBig data
Big data
 
Ativando Inteligência com Big Data
Ativando Inteligência com Big DataAtivando Inteligência com Big Data
Ativando Inteligência com Big Data
 
Governança de Dados e Big Data
Governança de Dados e Big DataGovernança de Dados e Big Data
Governança de Dados e Big Data
 

En vedette (6)

Aula CRP-0420-2016-10-DATACRACIA
Aula CRP-0420-2016-10-DATACRACIAAula CRP-0420-2016-10-DATACRACIA
Aula CRP-0420-2016-10-DATACRACIA
 
Aula CRP-0420-2016-04: Big Data 1
Aula CRP-0420-2016-04: Big Data 1Aula CRP-0420-2016-04: Big Data 1
Aula CRP-0420-2016-04: Big Data 1
 
Lançamento do SQL Server 2014 - Descobrindo BigData com HDInsight
Lançamento do SQL Server 2014 - Descobrindo BigData com HDInsightLançamento do SQL Server 2014 - Descobrindo BigData com HDInsight
Lançamento do SQL Server 2014 - Descobrindo BigData com HDInsight
 
Big Data - O que é o hadoop, map reduce, hdfs e hive
Big Data - O que é o hadoop, map reduce, hdfs e hiveBig Data - O que é o hadoop, map reduce, hdfs e hive
Big Data - O que é o hadoop, map reduce, hdfs e hive
 
Big Data
Big DataBig Data
Big Data
 
Big data ppt
Big data pptBig data ppt
Big data ppt
 

Similaire à Big Data para Leigos

PostgreSQL em projetos de Business Analytics e Big Data Analytics com Pentaho
PostgreSQL em projetos de Business Analytics e Big Data Analytics com PentahoPostgreSQL em projetos de Business Analytics e Big Data Analytics com Pentaho
PostgreSQL em projetos de Business Analytics e Big Data Analytics com PentahoAmbiente Livre
 
Palestra garimpando com pentaho data mining latinoware
Palestra garimpando com pentaho data mining latinowarePalestra garimpando com pentaho data mining latinoware
Palestra garimpando com pentaho data mining latinowareMarcos Vinicius Fidelis
 
Inteligência Analítica
Inteligência AnalíticaInteligência Analítica
Inteligência AnalíticaCesar Patiño
 
Pentaho Hadoop Big Data e Data Lakes
Pentaho Hadoop Big Data e Data LakesPentaho Hadoop Big Data e Data Lakes
Pentaho Hadoop Big Data e Data LakesAmbiente Livre
 
Big Data Analytics - Data Science - Aplicação e Tecnologia
Big Data Analytics - Data Science - Aplicação e TecnologiaBig Data Analytics - Data Science - Aplicação e Tecnologia
Big Data Analytics - Data Science - Aplicação e TecnologiaHélio Silva
 
Ppt webinar - renato avelar
Ppt  webinar - renato avelarPpt  webinar - renato avelar
Ppt webinar - renato avelarRenato Avelar
 
BIGDATA: Da teoria à Pratica
BIGDATA: Da teoria à PraticaBIGDATA: Da teoria à Pratica
BIGDATA: Da teoria à PraticaDaniel Checchia
 
Data Scientist: Onde vive? Como se reproduz? De que se alimenta?
Data Scientist: Onde vive? Como se reproduz? De que se alimenta?Data Scientist: Onde vive? Como se reproduz? De que se alimenta?
Data Scientist: Onde vive? Como se reproduz? De que se alimenta?Ludimila Gonçalves
 
Qual é o futuro da estratégia de dados?
Qual é o futuro da estratégia de dados?Qual é o futuro da estratégia de dados?
Qual é o futuro da estratégia de dados?Denodo
 
Palestra: Cientista de Dados – Dominando o Big Data com Software Livre
Palestra: Cientista de Dados – Dominando o Big Data com Software LivrePalestra: Cientista de Dados – Dominando o Big Data com Software Livre
Palestra: Cientista de Dados – Dominando o Big Data com Software LivreAmbiente Livre
 
Hackathon Inmetrics e Fiap: Desafios do Big Data
Hackathon Inmetrics e Fiap: Desafios do Big DataHackathon Inmetrics e Fiap: Desafios do Big Data
Hackathon Inmetrics e Fiap: Desafios do Big Datainmetrics
 
Big data - Uma visão geral da coisa...
Big data - Uma visão geral da coisa...Big data - Uma visão geral da coisa...
Big data - Uma visão geral da coisa...Arthur Souza
 
Introdução - Big Data e Business Intelligence
Introdução - Big Data e Business IntelligenceIntrodução - Big Data e Business Intelligence
Introdução - Big Data e Business IntelligenceLeandro Guerra
 
Big Data e Data Science: admirável mundo novo - IV SIC IFNMG
Big Data e Data Science: admirável mundo novo - IV SIC IFNMGBig Data e Data Science: admirável mundo novo - IV SIC IFNMG
Big Data e Data Science: admirável mundo novo - IV SIC IFNMGPetronio Candido
 
Big Data: O que é? e por onde começar?
Big Data: O que é? e por onde começar?Big Data: O que é? e por onde começar?
Big Data: O que é? e por onde começar?Paulo Ricardo Santos
 

Similaire à Big Data para Leigos (20)

PostgreSQL em projetos de Business Analytics e Big Data Analytics com Pentaho
PostgreSQL em projetos de Business Analytics e Big Data Analytics com PentahoPostgreSQL em projetos de Business Analytics e Big Data Analytics com Pentaho
PostgreSQL em projetos de Business Analytics e Big Data Analytics com Pentaho
 
Business Analytics
Business AnalyticsBusiness Analytics
Business Analytics
 
Palestra garimpando com pentaho data mining latinoware
Palestra garimpando com pentaho data mining latinowarePalestra garimpando com pentaho data mining latinoware
Palestra garimpando com pentaho data mining latinoware
 
Inteligência Analítica
Inteligência AnalíticaInteligência Analítica
Inteligência Analítica
 
Pentaho Hadoop Big Data e Data Lakes
Pentaho Hadoop Big Data e Data LakesPentaho Hadoop Big Data e Data Lakes
Pentaho Hadoop Big Data e Data Lakes
 
Big Data Analytics - Data Science - Aplicação e Tecnologia
Big Data Analytics - Data Science - Aplicação e TecnologiaBig Data Analytics - Data Science - Aplicação e Tecnologia
Big Data Analytics - Data Science - Aplicação e Tecnologia
 
Ppt webinar - renato avelar
Ppt  webinar - renato avelarPpt  webinar - renato avelar
Ppt webinar - renato avelar
 
Big Data
Big DataBig Data
Big Data
 
Data Science For Dummies From a Dummy
Data Science For Dummies From a DummyData Science For Dummies From a Dummy
Data Science For Dummies From a Dummy
 
BIGDATA: Da teoria à Pratica
BIGDATA: Da teoria à PraticaBIGDATA: Da teoria à Pratica
BIGDATA: Da teoria à Pratica
 
Data Scientist: Onde vive? Como se reproduz? De que se alimenta?
Data Scientist: Onde vive? Como se reproduz? De que se alimenta?Data Scientist: Onde vive? Como se reproduz? De que se alimenta?
Data Scientist: Onde vive? Como se reproduz? De que se alimenta?
 
Qual é o futuro da estratégia de dados?
Qual é o futuro da estratégia de dados?Qual é o futuro da estratégia de dados?
Qual é o futuro da estratégia de dados?
 
Palestra: Cientista de Dados – Dominando o Big Data com Software Livre
Palestra: Cientista de Dados – Dominando o Big Data com Software LivrePalestra: Cientista de Dados – Dominando o Big Data com Software Livre
Palestra: Cientista de Dados – Dominando o Big Data com Software Livre
 
Hackathon Inmetrics e Fiap: Desafios do Big Data
Hackathon Inmetrics e Fiap: Desafios do Big DataHackathon Inmetrics e Fiap: Desafios do Big Data
Hackathon Inmetrics e Fiap: Desafios do Big Data
 
Big data - Uma visão geral da coisa...
Big data - Uma visão geral da coisa...Big data - Uma visão geral da coisa...
Big data - Uma visão geral da coisa...
 
Introdução - Big Data e Business Intelligence
Introdução - Big Data e Business IntelligenceIntrodução - Big Data e Business Intelligence
Introdução - Big Data e Business Intelligence
 
Big Data e Data Science: admirável mundo novo - IV SIC IFNMG
Big Data e Data Science: admirável mundo novo - IV SIC IFNMGBig Data e Data Science: admirável mundo novo - IV SIC IFNMG
Big Data e Data Science: admirável mundo novo - IV SIC IFNMG
 
Big Data: O que é? e por onde começar?
Big Data: O que é? e por onde começar?Big Data: O que é? e por onde começar?
Big Data: O que é? e por onde começar?
 
Big Data x Data Mining - Hadoop
Big Data x Data Mining - HadoopBig Data x Data Mining - Hadoop
Big Data x Data Mining - Hadoop
 
Treinamento hadoop - dia1
Treinamento hadoop - dia1Treinamento hadoop - dia1
Treinamento hadoop - dia1
 

Plus de Pedro Neto

MySQL - copiando, movendo e restaurando dados
MySQL - copiando, movendo e restaurando dadosMySQL - copiando, movendo e restaurando dados
MySQL - copiando, movendo e restaurando dadosPedro Neto
 
FreeBSD para leigos
FreeBSD para leigosFreeBSD para leigos
FreeBSD para leigosPedro Neto
 
Sistemas de arquivos
Sistemas de arquivosSistemas de arquivos
Sistemas de arquivosPedro Neto
 
Desenvolvimento web seguro para leigos
Desenvolvimento web seguro para leigosDesenvolvimento web seguro para leigos
Desenvolvimento web seguro para leigosPedro Neto
 
Pentaho data integration
Pentaho data integrationPentaho data integration
Pentaho data integrationPedro Neto
 
Fundamentos de linux
Fundamentos de linuxFundamentos de linux
Fundamentos de linuxPedro Neto
 

Plus de Pedro Neto (6)

MySQL - copiando, movendo e restaurando dados
MySQL - copiando, movendo e restaurando dadosMySQL - copiando, movendo e restaurando dados
MySQL - copiando, movendo e restaurando dados
 
FreeBSD para leigos
FreeBSD para leigosFreeBSD para leigos
FreeBSD para leigos
 
Sistemas de arquivos
Sistemas de arquivosSistemas de arquivos
Sistemas de arquivos
 
Desenvolvimento web seguro para leigos
Desenvolvimento web seguro para leigosDesenvolvimento web seguro para leigos
Desenvolvimento web seguro para leigos
 
Pentaho data integration
Pentaho data integrationPentaho data integration
Pentaho data integration
 
Fundamentos de linux
Fundamentos de linuxFundamentos de linux
Fundamentos de linux
 

Big Data para Leigos

  • 2. Roteiro 1. O que não seria Big Data? 2. O que poderia ser Big Data! 3. Por que agora? 4. Tecnologias 5. Aplicações 6. Tecnicas 7. Big data x Business intelligence 8. Problemas futuros 9. Mercado de trabalho
  • 3. O que não seria Big data? ● Uma ferramenta ● Algo novo ● Um banco de dados gigante ● Business Intelligence (B.I.) ● Algo realizado ontem
  • 4. O que poderia ser Big Data! ● Algo grande (“Big”) ● Algo não ordenado ● Algo imediato ● Algo interesante (Inúmeras utilidades) ● Um desafio ● Uma oportunidade
  • 5. Porque agora? ● Novos paradigmas ● Rede banda larga mais acessível ● Discos maiores e mais rápidos ● Sistemas relacionais não foram feitos para armazenar tudo ● Sistemas antigos não foram feitos pensando na escalabilidade
  • 7. Aplicações ● Sistema de recomendações ● Redes sociais ● Análise de tráfego(web) ● Dashboards ● Sistemas de apoio a decisão
  • 10. Análise de tráfego na rede IMAGENS
  • 11. Técnicas utilizadas ● Aprendizado de máquina ● NPL ● Map Reduce ● Inteligência nos negócio(BI)
  • 12. Aprendizado de máquina ● Perfis de compras ● Detecção de padrões na área hospitalar ● Perfis de comportamento
  • 13. Map Reduce ● Técnica utilizada para processar paralelamente massas enormes de dados. ● Divide o processamento baseado em conjuntos “chave => valor” que serão distribuidos para diversos computadores realizarem o processamento
  • 14. Business Intelligence ● Algo velho! ● Diversas fontes de dados ● Processos de ETL ● Série de processos definidos para gerar informações e dar suporte a tomada de decisões ● Apoio e suporte as hierarquias de uma empresa
  • 15. Business Intelligence ● Soluções OLAP x OLTP ● Processos de ETL ● Conceito o Fatos o Dimensões o Métricas
  • 16. Problemas futuros ● Invasão de privacidade ● Segurança
  • 17. Mercado de trabalho ● Cientistas de dados o Estatísticos o Matemáticos o Cientistas da computação o Profissionais de BI