Leandro Escobar [email protected] PENSE BEM... Empresas UTILIZAM 15% dos dados disponíveis Até 70% dos dados são INATIVOS APPFLUENT Em média, 65% dos atributos (campos) NÃO POSSUEM QUALIDADE suficiente para serem analisados Pesquisas acadêmicas Boa parte dos DADOS INACESSÍVEIS estão dentro da empresa, mas EM SILOS GARTNER DAVENPORT NO COMEÇO... Estatística Visualização Reconhecimento de padrões Ciência de Dados Aprendizado de máquina Computação cognitiva Mineração de Dados Mineração de Dados LIMITAÇÃO DA ARQUITETURA OS DADOS SÃO TRAZIDOS ATÉ A LÓGICA DO PROGRAMA A lógica fica centralizada nos servidores UMA NOVA ABORDAGEM LEVAR A COMPUTAÇÃO ATÉ OS DADOS... A lógica é distribuída UMA NOVA ABORDAGEM LEVAR A COMPUTAÇÃO ATÉ OS DADOS... PARADIGMA DISTRIBUÍDO - MapReduce BIG DATA De TeraBytes Para YotaBytes! VOLUME BIG DATA Para streaming de dados! De dados estruturados VELOCIDADE VARIEDADE De captação lenta Para todo tipo de dados! HADOOP É O ECOSSISTEMA PARA BIG DATA A linguagem de programação que prevalece é o POSSIBILIDADES DO BIG DATA ACELERAR INTEGRAÇÕE DE DADOS INSTITUIÇÃO DE ENSINO SUPERIOR ON LINE Sem Hadoop: 5 dias para gerar os indicadores Com Hadoop: 2 horas POSSIBILIDADES DO BIG DATA GEORREFERENCIAMENTO – ANTECIPAR A OCORRÊNCIA DE EVENTOS: Ex EPIDEMIAS SINAN (Registro de casos de Dengue) IBGE (Pnad) MOTEOROLOGIA ONLINE (Accuweather) POSSIBILIDADES DO BIG DATA MÁQUINAS DE RECOMENDAÇÃO – OFERECER OS PRODUTOS COM MAIOR POTENCIAL POSSIBILIDADES DO BIG DATA ANÁLISE DE SENTIMENTOS – SABER O QUE AS PESSOAS FALAM SOBRE AS EMPRESAS POSSIBILIDADES DO BIG DATA ANÁLISE DE REDES SOCIAIS – ANTECIPAR AMEAÇAS DE FRAUDES - Relacionamento com fraudadores conhecidos: Novos consumidores que estão ligados a fraudadores; - Redes extraordinariamente grandes e diversificadas: Grandes grupo, que surgem rapidamente, podem indicar um golpe prestes a ocorrer - Anomalias estatísticas: As famílias que compartilham muitos sobrenomes ou diferentes indivíduos que compartilham os mesmos bens POSSIBILIDADES DO BIG DATA ANÁLISE DE REDES SOCIAIS – IDENTIFICAÇÃO DE PESSOAS INFLUENTES • Oferecer produtos • Formar opiniões • Divulgar eventos POSSIBILIDADES DO BIG DATA PREVISÃO DE EVENTOS – CONTROLE IOT – PREVISÃO DE DEFEITOS OU FALHAS Conectar diferentes equipamentos Analisar dados e prever eventos BIG DATA NA UNIVERSIDADE POSITIVO Projetos: - Monitoramento da velocidade da frota em tempo real (Projeto Global) - Otimização no atendimento a incidentes - Previsão de demanda de lasanhas: BRF - Recomendação de estoques para loja de motocicletas - Análise de tendência de vendas de produtos em mercados, para decisão de compra - Identificação de futuros pacientes de alto risco: Cliente sob sigilo - Apoio ao diagnóstico médico: Médicos sem fronteiras - Alertas de riscos de epidemias: Secretaria de Saúde do Paraná - Georreferenciamento de crises endêmicas: Secretaria de Saúde do Paraná - Alertas de evasão de alunos: UP - Máquinas de recomendação para retenção de alunos: UP - Analise de expressões faciais durante as compras - Máquina de recomendação para e-commerce - Previsão de compras em empresas de varejo O BIG DATA NOS PERMITE CONHECER AS PESSOAS, SEUS HÁBITOS, NECESSIDADES E DESEJOS, bem como ANTECIPAR EVENTOS E COMPORTAMENTOS Dúvidas???? Muito obrigado! Leandro Escobar [email protected]