FME e Big Data
Rafael Henrique
Agenda
● Big Data
● Formatos suportados
● Transformers
● Exemplos e Casos de Usos
Big Data
Conceito Big Data
“... Big data é um termo que descreve o grande volume de
dados sejam eles estruturados ou não-estruturados que
impactam as empresas diariamente …”
Big Data e FME
Evolução dos Formatos
Formatos para Big Data
NoSQL
Databases
Relational Database
MongoDB
ElasticSearchCouchDB Cloudant Amazon
DynamoDB
Azure
DocumentDB
Red Shift
Sap Hana
Teradata
DB2
Formatos para Big Data
Transformers Utilizado
Metadados Não estruturado
Migração de Bases
Estruturadas para não
estruturadas
Cruzamento de dados NoSQL
com dados Estruturados
Serviços na Nuvem
Problema Encontrado
Migração para Bases
NoSQL.
Solução
FME.
Resultados
Banco de Dados,
arquivos, serviços,
etc.
Migração de Bases NoSQL
Possibilidades de transformações entre dados
estruturados e não estruturados.
Migração de Bases NoSQL
Demo 1
Problema Encontrado
Cruzamento de
diferente formatos em
diferentes estruturas
Solução
FME.
Resultados
FME Simplifica e
padroniza a estrutura
dos dados facilitando
o tratamento
Cruzamento Dados
Cruzando diferente tipos de bases de dados
Cruzamento Dados
Demo 2
Problema Encontrado
Disponibilizar e
encontrar informaçõe
dos seus dados
Solução
FME.
Resultados
Facilidade de
integração com outro
sistemas e agilidade
para encontrar seus
dados
Metadados Dados
Criando Metadados
Metadados Dados
Demo 3
Problema Encontrado
Interação com
diferentes nuvens
Solução
FME.
Resultados
Conexão nativa
facilitando a
comunicação e
segunça da
informação
Serviços Cloud
Interação com serviços em Cloud
Serviços Cloud
Demo 4
MongoDB
MongoDB
Dúvidas.
Obrigado
Rafael Henrique
rafaelsilva@inovacaogis.co
m.br

Mais conteúdo relacionado

PDF
Construindo um Data Lake - TDC SP 2018
PPTX
Governança de dados - Power Bi Talks 3ª Edição
PPTX
Slides da Palestra - Designing de Soluções de BI - PASS DevSQL RJ - 05/06/2018
PPTX
Governança de Dados para BI, em tempos de Self-Service BI
PDF
Robson Motta - Computer on the beach 2014
PDF
Chaordic - BigData e MapReduce - Robson Motta
PPTX
realizando_limpeza_de_dados_com_data_quality_services
PPTX
Hackathon Inmetrics e Fiap: Desafios do Big Data
Construindo um Data Lake - TDC SP 2018
Governança de dados - Power Bi Talks 3ª Edição
Slides da Palestra - Designing de Soluções de BI - PASS DevSQL RJ - 05/06/2018
Governança de Dados para BI, em tempos de Self-Service BI
Robson Motta - Computer on the beach 2014
Chaordic - BigData e MapReduce - Robson Motta
realizando_limpeza_de_dados_com_data_quality_services
Hackathon Inmetrics e Fiap: Desafios do Big Data

Semelhante a Fme e bigdata (20)

PDF
NoSQL2_JorgeBenevolo_apresentacao_nosql.pdf
PPT
Bancos de Dados Pós-Relacionais
PDF
No sql no desenvolvimento de aplicações web colaborativas
PDF
Apresentação Modelo de Gestão de dados para sistemas Colaborativos
PDF
Persitência Poliglota TDC Recife 2019
PPTX
base de dados e de legos de dados dos legos
PDF
[DTC21] Lucas Gomes - Do 0 ao 100 no Big Data
PPT
Tomada decisão
PPTX
por_detras_dos_relatorios
PDF
Pesquisa sobre no sql
PDF
Cobo, Cristiane Brandão. Especialização Banco de Dados
PDF
Artigo de banco de dados
PDF
PPTX
Apresentação Final de Banco de Dados
PPT
Tesi Dados Final
PDF
TDC2016POA | Trilha BigData - Orquestrando Hadoop, Cassandra e MongoDB com o ...
PDF
Escalabilidade Linear com o Banco de Dados NoSQL Apache Cassandra.
PDF
Algumas das principais características do NoSQL
PDF
Aula 5 caracteristicas do ad
PPT
TDC - Planejando data Lake com big data clusters
NoSQL2_JorgeBenevolo_apresentacao_nosql.pdf
Bancos de Dados Pós-Relacionais
No sql no desenvolvimento de aplicações web colaborativas
Apresentação Modelo de Gestão de dados para sistemas Colaborativos
Persitência Poliglota TDC Recife 2019
base de dados e de legos de dados dos legos
[DTC21] Lucas Gomes - Do 0 ao 100 no Big Data
Tomada decisão
por_detras_dos_relatorios
Pesquisa sobre no sql
Cobo, Cristiane Brandão. Especialização Banco de Dados
Artigo de banco de dados
Apresentação Final de Banco de Dados
Tesi Dados Final
TDC2016POA | Trilha BigData - Orquestrando Hadoop, Cassandra e MongoDB com o ...
Escalabilidade Linear com o Banco de Dados NoSQL Apache Cassandra.
Algumas das principais características do NoSQL
Aula 5 caracteristicas do ad
TDC - Planejando data Lake com big data clusters
Anúncio

Mais de Inovação GIS - Tecnologia da Informação (20)

PDF
PROJETO DE MONITORAMENTO DE TARTARUGAS MARINHAS (PMTM) PORTO DO AÇÚ
PDF
PROJETO DE MONITORAMENTO DA PESCA PORTO DO AÇÚ
PDF
FME na Celesc – Ganho na automação dos processos
PDF
Uso de ETL na integração de dados geoespaciais nas atividades de planejament...
PDF
Relatórios automatizados utilizando FME
PDF
FME na Comgás – Automação de processos
PDF
IMPACTOS DA CONVERSÃO DE DADOS GEOESPACIAIS NA GESTÃO DOS IMÓVEIS PÚBLICOS FE...
PDF
Casos de uso do FME no IBGE
PDF
Automatizando processo utilizando workflow
PDF
Automatizando no FME server
PDF
PDF
Web services melhores praticas para Integração
PDF
Extraindo informações de Sites_usando_FME
PROJETO DE MONITORAMENTO DE TARTARUGAS MARINHAS (PMTM) PORTO DO AÇÚ
PROJETO DE MONITORAMENTO DA PESCA PORTO DO AÇÚ
FME na Celesc – Ganho na automação dos processos
Uso de ETL na integração de dados geoespaciais nas atividades de planejament...
Relatórios automatizados utilizando FME
FME na Comgás – Automação de processos
IMPACTOS DA CONVERSÃO DE DADOS GEOESPACIAIS NA GESTÃO DOS IMÓVEIS PÚBLICOS FE...
Casos de uso do FME no IBGE
Automatizando processo utilizando workflow
Automatizando no FME server
Web services melhores praticas para Integração
Extraindo informações de Sites_usando_FME
Anúncio

Último (19)

PDF
ASCENSÃO E QUEDA DO SOFTWARE LIVRE NO ESTADO BRASILEIRO
PDF
SEMINÁRIO DE IHC - A interface Homem-Máquina
PDF
Banco de Dados 2atualização de Banco de d
PDF
Jira Software projetos completos com scrum
PPTX
Tipos de servidor em redes de computador.pptx
PDF
Customizing básico em SAP Extended Warehouse Management, EWM110 Col26
PPTX
Aula 7 - Listas em Python (Introdução à Ciencia da Computação)
PDF
Aula 9 - Funções 202yttvrcrg5-1.pptx.pdf
PPTX
ccursoammaiacursoammaiacursoammaia123456
PDF
Processos no SAP Extended Warehouse Management, EWM100 Col26
PPTX
3b - Bradesco Lean Agile Training Plan - Ritos Operacionais (1).pptx
PPT
Aula de Engenharia de Software principais caracteristicas
PPT
Conceitos básicos de Redes Neurais Artificiais
PDF
Metodologia Scrumban-XP - Um Guia Rápido (MrSomebody19).pdf
PDF
Visão geral da SAP, SAP01 Col18, Introdução sistema SAP,
PDF
Processamento da remessa no SAP ERP, SCM610 Col15
PPTX
Analise Estatica de Compiladores para criar uma nova LP
PPTX
Aula 9 - Funções em Python (Introdução à Ciência da Computação)
PPTX
Proposta de Implementação de uma Rede de Computador Cabeada.pptx
ASCENSÃO E QUEDA DO SOFTWARE LIVRE NO ESTADO BRASILEIRO
SEMINÁRIO DE IHC - A interface Homem-Máquina
Banco de Dados 2atualização de Banco de d
Jira Software projetos completos com scrum
Tipos de servidor em redes de computador.pptx
Customizing básico em SAP Extended Warehouse Management, EWM110 Col26
Aula 7 - Listas em Python (Introdução à Ciencia da Computação)
Aula 9 - Funções 202yttvrcrg5-1.pptx.pdf
ccursoammaiacursoammaiacursoammaia123456
Processos no SAP Extended Warehouse Management, EWM100 Col26
3b - Bradesco Lean Agile Training Plan - Ritos Operacionais (1).pptx
Aula de Engenharia de Software principais caracteristicas
Conceitos básicos de Redes Neurais Artificiais
Metodologia Scrumban-XP - Um Guia Rápido (MrSomebody19).pdf
Visão geral da SAP, SAP01 Col18, Introdução sistema SAP,
Processamento da remessa no SAP ERP, SCM610 Col15
Analise Estatica de Compiladores para criar uma nova LP
Aula 9 - Funções em Python (Introdução à Ciência da Computação)
Proposta de Implementação de uma Rede de Computador Cabeada.pptx

Fme e bigdata