A evolução dos modelos de implantação na era big data
Video: SLIDES - Evolução dos Modelos Atômicos (Parte 01)
Conteúdo
Com o advento do big data, os modelos de implementação para gerenciamento de dados estão mudando. O data warehouse tradicional é tipicamente implementado em um único sistema, grande dentro do centro de dados. Os custos deste modelo têm levado as organizações a otimizar esses armazéns e limitar o escopo eo tamanho dos dados a serem gerenciados.
No entanto, quando as organizações querem aproveitar a enorme quantidade de informação gerada por fontes de dados grandes, as limitações dos modelos tradicionais não funcionam mais. Portanto, o aparelho armazém de dados tornou-se um método prático de criar um ambiente otimizado para suportar a transição para a nova gestão da informação.
O modelo grande aparelho de dados
Quando as empresas precisam combinar sua estrutura de data warehouse com dados grandes, o modelo do aparelho pode ser uma resposta para o problema de escala. Tipicamente, o aparelho é um sistema integrado que incorpora hardware (tipicamente em uma prateleira), que é optimizada para o armazenamento e gestão de dados.
Video: Бет Новек: Требуйте более открытого правительства
Porque eles são auto-suficientes, os aparelhos podem ser relativamente fácil e rápida de implementar, bem como oferecer menores custos de operação e manutenção, Portanto, o sistema será pré-carregado com um banco de dados relacional, a estrutura Hadoop, MapReduce, e muitos dos ferramentas que ajudam a ingerir e organizar os dados a partir de uma variedade de fontes.
Ele também incorpora motores de análise e ferramentas para simplificar o processo de análise de dados a partir de múltiplas fontes. O aparelho é, portanto, um sistema de finalidade única que normalmente inclui interfaces para tornar mais fácil para ligar a um armazém de dados existente.
O modelo grande nuvem de dados
Video: AULA 01 - Evolução dos modelos atômicos
A nuvem está se tornando uma plataforma atraente para gerenciar dados grandes e pode ser usado em um ambiente híbrido com ambientes no local. Algumas das novas inovações no carregamento e transferência de dados já estão mudando a viabilidade potencial da nuvem como uma grande plataforma de data warehouse.
Por exemplo, Aspera, uma empresa especializada em dados rápidos transferência entre redes, associa-se a Amazon.com para oferecer serviços de gerenciamento de dados em nuvem. Outros fornecedores, como FileCatalyst e Dados Expedition também estão voltadas para este mercado. Em essência, esta categoria tecnologia aproveita a rede e optimiza-lo com o propósito de mover arquivos com latência reduzida.
Como este problema de latência na transferência de dados continua a evoluir, será a norma para armazenar sistemas de dados grandes na nuvem que pode interagir com um data warehouse que também é baseado em nuvem ou um armazém que fica no centro de dados.