IBM WebSphere DataStage: Redução de custo de uma plataforma robusta para integração de dados corporativos Sobre a MD2 • Única empresa brasileira focada exclusivamente em projetos de integração de dados • Equipe dedicada, especializada e certificada em soluções de ETL (Extração, transformação e carga de dados), gestão de metadados e gestão da qualidade de dados. Batch & Real-time • Parceiros estratégicos – IBM: Integração de Dados, Serviços, implementações e treinamentos; – Natworks: Extração ADABAS; – Ação Informática : IBM VAD FOCO 100% EM INTEGRAÇÃO DE DADOS • Metodologia MD2: Ações específicas para cada fase dos projetos de integração de daqdos, visando crescimento escalar, documentação, confiabilidade nos dados, fácil gerenciamento e manutenção. Desafio: Integrar dados de diversos processos de negócios Entrada de Pedidos Manufatura Distribuição Business Intelligence Business Activity Monitoring Supply Chain Management Billing e Finanças Listas Externas Business Performance Management Dados Demográficos Customer Relationship Management Contatos Master Data Management Alguns dos problemas encontrados nas corporações • • • • • Falta de dados confiáveis para tomada de decisão Falta de visões consolidadas para gestão eficaz Difícil integração dos dados originados dos sistemas legados Dificuldade em consolidar os dados de diversas aplicações Falta de recursos de desenvolvimento focado em qualidade de dados Customers Employees Transactions Partners Products Organizations Financials e-Mails Databases Web Content Media Reports Documents Alguns dos problemas encontrados nas corporações • • • • • • Os dados transformados requerem sempre atualizações Múltiplas fontes do mesmo dado Falta de padrões ou consistência Complexo processo de captura de informações novas e alteradas Grande volume de dados, soluções complexas e códigos customizados Necessidade de processos rápidos e de fácil gerenciamento CRM Ordem Compra Supply Chain Procurement Benefícios de negócios na adoção de uma solução de integração de dados A adoção de uma plataforma de integração de dados garante: – Aumento de produtividade sobre desenvolvimentos manuais – Disponibiliza recursos para novos projetos – Deixa o núcleo dos dados padronizados – Permite a criação de novos processos de negócio – Agiliza as decisões da empresa com segurança – Aumento da eficiência operacional e satisfação dos clientes – Resposta rápida a eventos do mercado Benefícios técnicos na adoção de uma solução profissional de integração de dados – Aumento na qualidade dos dados – Re-utilização de recursos tecnológicos – Escalabilidade da solução – Facilidade de Uso – Redução do tempo de desenvolvimento de novos processos de integração Um exemplo de como a solução pode ajudar (Retorno de investimento) Problema: Um cliente do setor varejista necessitava de uma consolidação dos dados do ERP PeopleSoft e outros aplicativos financeiros que rodavam em Mainframe e Unix para rodar na suite Oracle Financials em plataforma Unix. O novo ambiente deveria integrar os dados destas aplicações. Solução que seria adotada pelo cliente: Desenvolvimento de programação manual nos ambientes das aplicações. Solução ofertada e aceita: Implementação de uma solução de migração de dados utilizando o Websphere DataStage Impactos diretos: Redução de 90% no prazo de desenvolvimento da solução permitindo economia de quase R$ 5 milhões de Reais. Além disso, a adoção de uma metodologia permitiu o re-uso de componentes gerados para outros projetos corporativos. Solução IBM WebSphere DataStage Plataforma profissional de Integração de dados (Extração, transformação e carga de dados) Suíte IBM Information Server DataStage Descoberta e modelagem: Conteúdo e estrutura de dados Padronizar, equiparar, enriquecer e corrigir a informação Formatar e reestruturar a informação para novos propósitos Sincronizar e mover a informação para entrega sob demanda Plataforma IBM de integração – Suíte Information Server O software IBM DataStage é o componente principal da suíte Infomation Server com recursos diferenciados de integração considerando ampla conectividade, performance, reusabilidade de componentes e gestão de metadados integrada. Posicionamento de mercado do DataStage Gartner Magic Quadrant for Data Integration Tools November 2006 Source: Gartner, Inc. “Magic Quadrant for Data Integration Tools, 2006” by Ted Friedman, Mark Beyer, Andreas Bitterer. November 22, 2006. ID Number: G00141484. This Magic Quadrant graphic was published by Gartner, Inc. as part of a larger research note and should be evaluated in the context of the entire report. The Gartner report is available upon request from IBM. IBM WebSphere DataStage WebSphere DataStage Client Designer Director Administrator Manager WebSphere DataStage Server Valores para agilidade e redução de custo em projetos de integração – Software cliente-servidor que oferece fácil ambiente de implementação de processos de extração, transformação e carga de dados; – Valida, transforma e entrega os dados contemplando todas as regras de negócio necessárias; – Aderência a todas as fontes de dados disponíveis; – Perfomance escalar com recursos de paralelismo de processos. Características técnicas do DataStage Produto disponível para todas as plataformas operacionais; Produto totalmente orientado a processos; Componentes re-usáveis, completamente configuráveis; Alta escalabilidade; Fácil implementação e manutenção; Interfaces nativas em bases relacionais: Informix, DB2, Oracle, SQL Server, Sybase, Teradata, dentre outros; Acesso para demais bases de arquivos: Access, DBF, MS Excel, Flat files, FTP, XML, etc. Porque DataStage Processo gráfico de fácil gerenciamento: Criação e manutenção. Porque DataStage Produto disponível para todas as plataformas ( Mainframe, Unix, Windows , Linux ). Produto totalmente orientado a processos. Modelo visual para definição dos fluxos dos processos. Componentes re-usáveis, completamente configuráveis. Rápido desenvolvimento. Alta escalabilidade Para processos de dados de alta complexidade e alto desempenho. Fácil implementação e manutenção. DataStage: Fácil processo de desenvolvimento e inserção de regras Referências DataStage no BRASIL Financial Services Communications Industrial Insurance Distribution & Services CASO DE SUCESSO Empresa brasileira de telecomunicações com excelente atuação no mercado de telefonia móvel. Gerencia e integra milhões de dados diários acerca de clientes, produtos e serviços com a tecnologia IBM WebSphere DataStage. Objetivo Ter maior controle sobre o ambiente de integração de dados, capacitar equipe, reduzir custos com retrabalho e gestão de conhecimento. Desafios - Falta de conhecimento sobre as melhores práticas com processos; - Falta de informação para garanitr qualidade no desenvolvimento; - Melhor gestão de conhecimento; - Melhor gestão de recursos de hardware e software. Solução Uso da tecnologia IBM WebSphere Information Integration Uso das opções do centro de excelência MD2: Tecnologia MetaBridge, Education Services, Quality Assurance e Metodologia. Retorno de Investimento Rápida implantação e gestão do ambiente de integração para atendimento às demandas de negócio; Melhoria do conhecimento e resultados do projeto; Redução expressiva de custo com: Gestão de conhecimento Gestão de tecnologia.