Lar Finanças Pessoais Data Warehousing e o Desafio de Infraestrutura - dummies

Data Warehousing e o Desafio de Infraestrutura - dummies

Vídeo: HPE Nimble Storage All Flash Array Walkthrough 2025

Vídeo: HPE Nimble Storage All Flash Array Walkthrough 2025
Anonim

A natureza de um data warehouse (que é composto principalmente, ou exclusivamente, de dados que vem de outro lugar, outro aplicativo bases de dados e é convertido em um recurso de dados) significa que ele não pode ficar sozinho como uma entidade independente dentro da sua organização.

O crescimento fenomenal da computação distribuída (Internet e intranet, bem como data warehousing dados internos e externos) resultou em uma mudança fundamental na forma como os aplicativos são construídos. Nos velhos tempos de mainframes e minicomputadores, um único sistema físico continha amplamente a infra-estrutura (sistemas operacionais, bancos de dados e sistemas de arquivos e gerentes de comunicações e transações).

< ! --1 ->

Com a computação distribuída agora, o modelo dominante (mesmo os mainframes e os minicomputadores geralmente fazem parte de um ambiente distribuído maior), a infraestrutura é distribuída em diferentes p Latforms em toda a sua empresa e possivelmente fora de sua empresa.

Quando você desenvolve qualquer aplicativo ou sistema, armazenagem de dados ou um aplicativo de processamento de transações mais tradicional, você possui dependências significativas em partes do ambiente geral sobre as quais você não possui controle direto. Aqui estão alguns exemplos específicos do data warehousing:

  • Você projeta um data warehouse que, com base em requisitos de negócios e políticas de disponibilidade de dados de aplicativos, deve ter aproximadamente 25 gigabytes de dados novos e atualizados extraídos de várias fontes todas as noites e enviados pela rede para o plataforma de hardware na qual o data warehouse está sendo executado.

    Sua infraestrutura de rede corporativa ainda está subdimensionada. Após uma análise adicional, a rede não pode se aproximar de suportar o throughput necessário para mover os dados para o seu armazém na janela de tempo disponível.

  • Durante a fase de escopo do projeto de data warehousing, você determina que uma estratégia de empurrão para atualizar o data warehouse é o modelo mais adequado a seguir. Para implementar uma estratégia de empurrão, você deve modificar cada aplicativo de origem para incluir o código que detecta quando esse aplicativo deve empurrar dados (enviar) para o data warehouse.

    As aplicações legadas que fornecem dados ao armazém são, infelizmente, tão difíceis de entender que uma política de não fazer alterações, a menos que absolutamente necessário esteja em vigor para cada aplicativo.

  • Você decide prosseguir uma solução OLAP relacional (ou ROLAP) e executar uma série de benchmarks em relação a três produtos DBMS relacionais (RDBMS) para ver qual deles é compatível com o processamento de informações e decisões (em vez de processamento de transações).

    O produto que apresentou o menor desempenho em seus benchmarks é, infelizmente, também seu padrão corporativo, e qualquer banco de dados relacional instalado em qualquer lugar da sua empresa deve ser desta variedade, não importa como planeja usá-lo.

Pense conceitualmente (não se preocupe com os detalhes da implementação) nos estágios iniciais de um projeto de data warehousing, ou qualquer outro esforço de desenvolvimento de aplicativos - não é apenas aceitável, também é uma boa prática de desenvolvimento de sistemas.

Em algum momento, no entanto, você deve considerar hardware, software, custos, orçamento e outros tipos de restrições do mundo real. Antes de começar a construção, certifique-se de considerar tudo o que pode afetar seus projetos e planos para seu data warehouse.

Este projeto é muito parecido com a construção de uma casa. Você segue um processo pelo qual você determina suas necessidades e, em seguida, o arquiteto elabora planos. Os planos destacam os materiais que você precisa para suportar seus requisitos - garantindo que o produto acabado atinja a visão estabelecida no início.

Data Warehousing e o Desafio de Infraestrutura - dummies

Escolha dos editores

Noções básicas do arquivo de dados Flashback da Oracle 12c - dummies

Noções básicas do arquivo de dados Flashback da Oracle 12c - dummies

O Flashback Data Archive do oracle 12c é um mecanismo de banco de dados que permite que você para armazenar periodicamente ou indefinidamente todas as versões de linha em uma tabela ao longo da sua vida útil. Você pode então escolher uma hora para ver os dados como existia em um ponto específico. Esteja ciente de que o Flashback Data Archive é um recurso licenciado. ...

Noções básicas de clusters de aplicativos reais do Oracle 12c - manequins

Noções básicas de clusters de aplicativos reais do Oracle 12c - manequins

Se você visitou os sites da Oracle nos últimos 12 anos , você viu o byline de marketing: "Inquebrável. "Essa linha de tag refere-se ao recurso Real Application Clusters (RAC). Claro, muitos elementos estão envolvidos, mas o RAC tem o destaque. O RAC é a solução de clustering de banco de dados Oracle. Em certo sentido, funciona na teoria de que ...

Noções básicas de Redo Log Files no Oracle 12c - dummies

Noções básicas de Redo Log Files no Oracle 12c - dummies

Redo os arquivos de log armazenam as informações do buffer de log no banco de dados Oracle 12c. Eles são escritos pelo Log Writer (LGWR). Mais uma vez, você não pode ler esses arquivos binários sem a ajuda do software de banco de dados. Normalmente, os arquivos de reto de log são nomeados com a extensão. LOG ou. RDO. Pode ser qualquer coisa que você queira, ...

Escolha dos editores

São orgasmos ok durante a gravidez? - Dummies

São orgasmos ok durante a gravidez? - Dummies

As mulheres grávidas não só têm permissão para fazer sexo, mas muitas vezes o desejam. Mas é bom aproveitar a relação sexual com o ponto do orgasmo? Afinal, os orgasmos são nada mais do que contrações - e as pessoas sugeriram que isso poderia desencadear mão-de-obra. Isso é apenas um mito. De fato, grávida ...

Alimentando a Multidão em uma Reunião Familiar - manequins

Alimentando a Multidão em uma Reunião Familiar - manequins

Cozinhando uma refeição para um grande grupo (reunião familiar ou de outra forma ) requer planejamento e resistência. Aqui está um guia útil para quantidades de alimentos e segurança alimentar, e conselhos sobre a organização de uma festa de potluck. Planejando para potlucks A forma mais comum de comestibles de grupo é uma festa de potluck - qual é a maneira mais barata e fácil de ...

Anatomia do Penis humano - dummies

Anatomia do Penis humano - dummies

Sabendo como as funções de um pénis podem fornecer uma visão útil do sexo e do corpo humano - se você quer entender o pénis e a anatomia masculina melhor ou aprender sobre isso pela primeira vez. Basicamente, um pênis é composto de três estruturas, que são feitas de um material esponjoso que pode preencher com sangue: ...

Escolha dos editores

Como lidar com outliers causados ​​por Forças externas - manequins

Como lidar com outliers causados ​​por Forças externas - manequins

Certifique-se de verificar atentamente os outliers antes eles influenciam sua análise preditiva. Os outliers podem distorcer a análise de dados e dados. Por exemplo, qualquer análise estatística feita com dados que deixa outliers no lugar acaba por desviar os meios e variâncias. Os outliers não controlados ou mal interpretados podem levar a conclusões falsas. Diga os seus dados que ...

Como criar um modelo de análise preditiva com regressão R - manequins

Como criar um modelo de análise preditiva com regressão R - manequins

Você deseja criar um preditivo modelo de análise que você pode avaliar usando resultados conhecidos. Para fazer isso, vamos dividir nosso conjunto de dados em dois conjuntos: um para treinar o modelo e outro para testar o modelo. Uma divisão 70/30 entre treinamento e testes de conjuntos de dados será suficiente. As próximas duas linhas de código ...

Como definir objetivos de negócios para um modelo de análise preditiva - dummies

Como definir objetivos de negócios para um modelo de análise preditiva - dummies

Um modelo de análise preditiva visa resolvendo um problema comercial ou realizando um resultado comercial desejado. Esses objetivos comerciais se tornam os objetivos do modelo. Conhecer aqueles garante o valor comercial do modelo que você constrói - o que não deve ser confundido com a precisão do modelo. Hipotéticamente, você pode construir um modelo preciso para ...