Dimensionamento de cluster
A capacidade de processamento de um cluster de Big Data pode ser expandida horizontalmente adicionando nós. Se a escala de cluster não atender aos requisitos de serviço, você pode expandir manualmente ou reduzir no cluster. O MRS seleciona de forma inteligente o nó com a menor carga ou a quantidade mínima de dados a serem migrados para redução. O nó a ser reduzido não receberá novas tarefas e continuará a executar as tarefas existentes. Ao mesmo tempo, o MRS copia seus dados para outros nós e o nó é desativado. Se as tarefas no nó não puderem ser concluídas depois de muito tempo, o MRS migrará as tarefas para outros nós, minimizando o impacto nos serviços de cluster.
Expandir um cluster
Atualmente, você pode adicionar nós centrais ou de tarefa para dimensionar um cluster para lidar com cargas de serviço de pico. A adição de nós de cluster do MRS não afeta os serviços do cluster existente. Para obter detalhes sobre como corrigir a distorção de dados causada pela expansão da capacidade, consulte Como o HDFS equilibra os dados?.
Expandir um cluster cobrado no modo anual/mensal
Se a taxa de crescimento do serviço exceder o valor esperado após a assinatura de um cluster do MRS cobrado no modo Yearly/Monthly, é necessário expandir o cluster além da assinatura. O MRS permite-lhe expandir clusters cobrados no modo Yearly/Monthly enquanto desfruta dos descontos de subscrição.
Você pode acessar o console de gerenciamento do MRS e adicionar nós a um cluster com apenas alguns cliques. O processo de expansão do cluster não requer intervenção manual e leva apenas alguns minutos, o que ajuda a aliviar a pressão sobre as crescentes necessidades de processamento de dados de serviço.
Reduzir um cluster
Você pode reduzir o número de nós centrais ou de tarefa a serem dimensionados em um cluster para que o MRS ofereça melhores recursos de armazenamento e computação a menores custos de O&M com base nos requisitos de serviço. Depois de dimensionar em um cluster do MRS, o MRS seleciona automaticamente os nós que podem ser reduzidos com base no tipo de serviços instalados nos nós.
Durante a redução de nós centrais, os dados nos nós originais são migrados. Se a localização dos dados for armazenada em cache, o cliente atualizará automaticamente as informações de localização, o que poderá afetar a latência. A redução do nó pode afetar a duração da resposta do primeiro acesso a alguns dados do HBase em HDFS. Você pode reiniciar o HBase ou desabilitar ou ativar tabelas relacionadas para evitar esse problema.
Os nós de tarefa não armazenam dados de cluster. Eles são nós de computação e não envolvem migração de dados nos nós.