Como lançar um aplicativo mapreduce no hadoop 1

Video: Como criar um APLICATIVO e PUBLICAR na PLAY STORE (sem saber programação)

Para ver como o JobTracker e TaskTracker trabalhar juntos para realizar uma ação MapReduce, dê uma olhada na execução de um aplicativo MapReduce. A figura mostra as interações, e a seguinte lista passo estabelece o play-by-play:

Video: Como criar aplicativos e publicar na Google Play (SEM PROGRAMAR)

1. A aplicação cliente envia uma solicitação de pedido ao JobTracker.

   Video: #023 Como lançar um Aplicativo | CBN 12/06/14

2. O JobTracker determina quantos recursos de processamento são necessários para executar o aplicativo inteiro.

   Isso é feito por solicitar os locais e os nomes dos arquivos e blocos de dados que o aplicativo precisa do NameNode e calculando quantas tarefas mapa e reduzir as tarefas que serão necessários para processar todos esses dados.

3. O JobTracker olha para o estado dos nós escravos e filas todas as tarefas de mapa e reduzir as tarefas para execução.

4. Como slots de processamento tornam-se disponíveis nos nós de escravos, tarefas mapa são implantados para os nós escravos.

   
   
   
   

   tarefas mapa atribuídos aos blocos de dados específicos são atribuídos a nós onde que mesmo os dados são armazenados.

5. O progresso da tarefa monitores JobTracker, e no caso de uma falha de tarefa ou uma falha de nó, a tarefa é reiniciado no próximo slot disponível.

   Se a mesma tarefa falhar após quatro tentativas (que é um valor padrão e pode ser personalizado), todo o trabalho falhará.

6. Após o mapa tarefas são acabado, reduzir as tarefas processar os conjuntos de resultados provisórios das tarefas mapa.

7. O conjunto de resultados é retornado para o aplicativo cliente.

   

Aplicações mais complicadas podem ter várias rondas de mapeamento / redução fases, em que o resultado de uma volta é usado como entrada para a segunda fase. Isso é bastante comum com as cargas de trabalho de estilo SQL, onde há, por exemplo, juntar e grupo-by operações.