Hoje vou comentar rapidamente sobre os principais arquivos de configuração do Hadoop.
Arquivos de Configuração Hadoop
- São XML's
- Principais Arquivos:
- Hadoop-env.sh --> Variáveis de ambiente do Hadoop (Home e etc)
- Core-site.xml --> Parâmetros específicos da ferramenta hadoop
- Hdfs-site.xml --> Parâmetros especificos do HDFS (Ex: Tamanho da partição (Block Size))
- Mapred-site.xml --> Tudo que diz respeito ao MapReduce (Ex: Tamanho do Buffer, número de tarefas máximas para cada slave)
- Não XML's
- Slaves
- Contém todos os nós do cluster (IP e nome da Máquina)
- cada linha representa um slave(Worker) do cluster - Namenode
- Masters
- Lista e armazena todas as máquinas Master (o comum é ter 1 master e outro para redundância)
- Cada linha é um Master - Datanode
Obrigado pela atenção. Toda e qualquer dúvida será bem vinda
Nenhum comentário:
Postar um comentário