O masterserver hbase
Iniciando uma discussão sobre HBase arquitetura (Hadoop Banco de Dados) descrevendo RegionServers vez do MasterServer pode surpreendê-lo. O termo RegionServer
Conteúdo
Video: HBase Tutorial for Beginners | What is HBase in Hadoop | HBase Shell Commands
Os RegionServers que dependem da MasterServer para determinadas funções, mas não no sentido de uma relação mestre-escravo para o armazenamento e recuperação de dados. No canto superior esquerdo da figura, notar que os clientes não apontar para o MasterServer, mas apontar vez ao cluster e RegionServers Zookeeper.
Video: Apache HBase 101: How HBase Can Help You Build Scalable, Distributed Java Applications
O MasterServer não está no caminho para o armazenamento de dados e acesso - que é o trabalho do cluster Zookeeper e os RegionServers. Dê uma olhada nas funções primárias do MasterServer, que é também um processo de software (ou daemon) como os RegionServers. O MasterServer está lá para
Monitorar os RegionServers no cluster HBase: O MasterServer mantém uma lista de RegionServers activas no cluster HBase.
Lidar com operações de metadados: Quando uma tabela é criada ou seus atributos são alterados (ajuste de compressão, configurações de cache, controle de versão, e mais) o MasterServer lida com a operação e armazena os metadados necessários.
Atribuir regiões: O MasterServer atribui regiões RegionServers.
Gerenciar RegionServer failover: Tal como acontece com qualquer cluster distribuído, você espera que falhas de nó não ocorrem e você planeja para eles de qualquer maneira. Quando os servidores região falhar, Zookeeper notifica o MasterServer para que as operações de failover e restauração pode ser iniciada.
Supervisionar o balanceamento de carga das regiões em todos os RegionServers disponíveis: Você deve se lembrar que as tabelas são compostas de regiões que são distribuídas uniformemente em todos os RegionServers disponíveis. Este é o trabalho do fio balanceador (ou tarefa, se preferir) que a MasterServer ativa periodicamente.
Gerenciar (e limpar) tabelas de catálogo: Duas tabelas de catálogo-chave são usadas pelo sistema HBase para ajudar um cliente a encontrar um par valor de chave em particular no sistema.
O MasterServer fornece gerenciamento destas tabelas críticas em nome de todo o sistema HBase.
Desmarque a WAL: O MasterServer interage com o WAL durante RegionServer failover e limpa periodicamente os logs.
Fornecer um quadro co-processador para a observação de operações de mestre: Aqui está outro termo novo para o seu crescimento glossário HBase. co-processadores executado no contexto do MasterServer ou RegionServers. Por exemplo, um observador coprocessador MasterServer permite alterar ou estender a funcionalidade normal do servidor quando as operações tais como a criação da tabela ou exclusão mesa ocorrer. Muitas vezes, co-processadores são usados para gerenciar índices da tabela para aplicações de HBase avançados.
Video: What is Zookeeper?
Um co-processador, que é executado no contexto da MasterServer e ou RegionServer (ou ambas) pode ser utilizada para melhorar a segurança, criar índices secundários, e mais. Você pode encontrar mais informações sobre co-processadores em um HBase blog da comunidade.
Tal como acontece com todas as tecnologias Hadoop de código aberto, as operações MasterServer provavelmente vai mudar ao longo do tempo que a comunidade de engenheiros trabalham em inovações destinadas a melhorar a HBase. Como desta escrita, no entanto, agora você tem uma lista bastante completa que serve como uma referência de alto nível para o MasterServer.
Finalmente, mais um ponto importante a fazer sobre o HBase MasterServer: Não pode e deve ser um MasterServer de backup em qualquer cluster HBase. É preciso que haja apenas um MasterServer ativo em um determinado momento, de modo que o MasterServer de backup é para fins de failover.
Você deve se lembrar que o MasterServer não está no caminho de acesso de dados para clientes HBase. No entanto, você também deve se lembrar que o MasterServer é responsável por ações como failover RegionServer e balanceamento de carga. A boa notícia é que os clientes podem continuar a consultar o cluster HBase se o mestre vai para baixo, mas para operações de cluster normais, o mestre não deve permanecer baixo por qualquer período de tempo.