Este conteúdo foi traduzido por máquina para sua conveniência e a Huawei Cloud não pode garantir que o conteúdo foi traduzido com precisão. Para exibir o conteúdo original, use o link no canto superior direito para mudar para a página em inglês.
Atualizado em 2024-01-10 GMT+08:00

Modificação de especificações de instância

Cenário

Depois de criar uma instância do Kafka, você pode aumentar ou diminuir suas especificações. Tabela 1 lista as opções de modificação disponíveis.

Tabela 1 Opções de modificação de especificação

Flavor anterior/novo

Objeto modificado

Aumento

Diminuição

Flavor novo

Quantidade do broker

×

Espaço de armazenamento

×

Flavor do broker

Flavor anterior

Largura de banda

×

Espaço de armazenamento

×

Flavor do broker

×

×

Distinguir entre especificações antigas e novas:

  • Especificações antigas: na lista de instâncias, a especificação da instância é exibida como largura de banda (por exemplo, 100 MB/s).
  • Novas especificações: na lista de instâncias, a especificação da instância é exibida como o flavor do ECS multiplicado pelo número de brokeres (por exemplo, kafka.2u4g.cluster*3 brokers).
Figura 1 Lista de instâncias

Impacto da modificação da especificação

Demora de 5 a 10 minutos para modificar as especificações em um broker. Quanto mais brokers, mais tempo a modificação leva.

Tabela 2 Impacto da modificação da especificação

Objeto modificado

Impacto

Quantidade de largura de banda ou de broker

  • Aumentar a largura de banda ou adicionar brokers não afeta os brokers ou serviços originais.
  • Quando você aumenta a largura de banda ou altera a quantidade do broker, o espaço de armazenamento é expandido proporcionalmente com base no espaço em disco atual. Por exemplo, suponha que o número original de brokers de uma instância seja 3 e o tamanho do disco de cada broker seja 200 GB. Se a quantidade do broker mudar para 10 e o tamanho do disco de cada broker ainda for 200 GB, o tamanho total do disco se tornará 2000 GB.
  • Novos tópicos são criados em novos brokers, e os tópicos originais ainda estão nos brokers originais, resultando em partições desequilibradas. Você pode reatribuir partições para migrar as réplicas das partições de tópico originais para os novos brokers.

Espaço de armazenamento

  • Você pode expandir o espaço de armazenamento 20 vezes.
  • A expansão do espaço de armazenamento não afeta os serviços.

Flavor do broker

  • Os tópicos de réplica única não oferecem suporte à criação e recuperação de mensagens durante esse período. Os serviços serão interrompidos.
  • Se um tópico tiver várias réplicas, aumentar ou diminuir o flavor do broker não interrompe os serviços, mas pode causar desordem das mensagens de partição. Avalie esse impacto e evite os horários de pico.
  • As reinicializações contínuas do broker causarão alterações no líder da partição, interrompendo as conexões por menos de um minuto quando a rede estiver estável. Para tópicos de várias réplicas, configure o mecanismo de repetição no cliente de produtor. Para fazer isso:
    • Se você usar um cliente de Kafka de código aberto, configure o parâmetro retries para um valor no intervalo de 3 a 5.
    • Se você usar o Flink, configure a política de repetição consultando o seguinte código:
      StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment();
      env.setRestartStrategy(RestartStrategies.fixedDelayRestart(3, Time.seconds(20)));
  • Se o número total de partições criadas para uma instância for maior que o limite superior permitido por um novo flavor, a redução não poderá ser executada. O número máximo de partições varia de acordo com as especificações da instância. Para detalhes, veja Especificações.

    Por exemplo, se 800 partições foram criadas para uma instância kafka.4u8g.cluster*3, você não pode mais reduzir a instância para kafka.2u4g.cluster*3 porque esse flavor permite apenas 750 partições.

Processo de modificação de flavors de broker

Quando você aumenta ou diminui o flavor do broker, uma reinicialização contínua é executada nos brokers. O processo a seguir toma três brokers como exemplo:

  1. Interrompa o processo de Kafka no Broker 0.
  2. Aumente ou diminua o flavor do Broker 0.
  3. Reinicie o processo de Kafka no Broker 0.
  4. Repita 1 a 3 para aumentar ou diminuir o flavor do Broker 1.
  5. Repita 1 a 3 para aumentar ou diminuir o flavor do Broker 2.
Figura 2 Processo de modificação de flavors de broker

Procedimento

  1. Faça logon no console de gerenciamento.
  2. Clique em no canto superior esquerdo para selecionar uma região.

    Selecione a região onde sua instância do Kafka está localizada.

  3. Clique em e escolha Middleware > Distributed Message Service (for Kafka) para abrir o console do DMS for Kafka.
  4. Na linha que contém a instância para a qual você deseja modificar as especificações, escolha More > Modify Specifications na coluna Operation.
  5. Especifique o espaço de armazenamento necessário, a quantidade do broker, o flavor do broker ou a largura de banda.

    Para modificar especificações antigas, execute as seguintes etapas:
    • Aumente a largura de banda.

      Especifique uma nova largura de banda e clique em Next. Confirme as configurações e clique em Submit.

      Exiba a nova largura de banda da instância na coluna Specifications na lista de instâncias.

      Depois de aumentar a largura de banda, adicione o endereço IP do novo broker à configuração de conexão do cliente para melhorar a confiabilidade.

    • Amplie o espaço de armazenamento.

      Especifique um novo espaço de armazenamento e clique em Next. Confirme as configurações e clique em Submit.

      Visualize o novo espaço de armazenamento na coluna Used/Available Storage Space (GB) na lista de instâncias.

    Para modificar novas especificações, execute as seguintes etapas:

    • Amplie o espaço de armazenamento.

      Para Change By, selecione Storage. Para Storage Space per Broker, especifique um novo espaço de armazenamento e clique em Next. Confirme as configurações e clique em Submit.

      Visualize o novo espaço de armazenamento (espaço de armazenamento por broker x número de brokers) na coluna Used/Available Storage Space (GB) na lista de instâncias.

    • Adicione brokers.
      1. Para Change By, selecione Brokers.
      2. Para Brokers, especifique a quantidade do broker.
      3. Se o acesso público estiver habilitado, configure EIPs para os novos corretores.
      4. Para Subnet, selecione Primary CIDR block ou Secondary CIDR block e, em seguida, selecione uma sub-rede na lista suspensa. Novos brokers serão implementados nesta sub-rede.
        • Primary CIDR block: sub-rede selecionada durante a criação da instância. A sub-rede primária não pode ser modificada.
        • Secondary CIDR block: se o número de endereços IP na sub-rede primária for insuficiente, selecione uma sub-rede secundária. A sub-rede secundária e a sub-rede primária estão na mesma VPC e podem se comunicar entre si por padrão. Se nenhuma sub-rede secundária tiver sido criada, acesse o console da VPC para criar uma.
      5. Para Private IP Addresses, selecione Auto ou Manual.
        • Auto: o sistema atribui um endereço IP da sub-rede automaticamente.
        • Manual: selecione os endereços IP para os novos corretores na lista suspensa. Se o número de endereços IP selecionados s for menor que o número de brokers, os endereços IP restantes s serão atribuídos automaticamente.
      6. Clique em Next.
      7. Confirme as configurações e clique em Submit.

        Exiba o número de brokers na coluna Specifications na lista de instâncias.

      Depois de adicionar brokers, adicione os endereços IP dos novos brokers à configuração de conexão do cliente para melhorar a confiabilidade.

    • Aumente ou diminua o flavor do broker.

      Para Modify By, selecione Broker Flavor. Em seguida, selecione um novo flavor de broker e clique em Next. Confirme as configurações e clique em Submit.

      Visualize o flavor do broker na coluna Flavor da lista de instâncias.