MSKCota da Amazon - Amazon Managed Streaming for Apache Kafka

As traduções são geradas por tradução automática. Em caso de conflito entre o conteúdo da tradução e da versão original em inglês, a versão em inglês prevalecerá.

MSKCota da Amazon

Sua AWS conta tem cotas padrão para a AmazonMSK. Salvo indicação em contrário, cada cota por conta é específica da região em sua conta. AWS

MSKCota da Amazon

  • Até 90 corretores por conta. 30 corretores por cluster de ZooKeeper modo. 60 corretores por KRaft cluster de modo. Para solicitar uma cota maior, acesse o console Service Quotas.

  • Um mínimo de 1 GiB de armazenamento por agente.

  • Um máximo de 16.384 GiB de armazenamento por agente.

  • Um cluster que usa IAMcontrole de acesso pode ter até 3.000 TCP conexões por agente a qualquer momento. Para aumentar esse limite, você pode ajustar a propriedade de listener.name.client_iam_public.max.connections configuração listener.name.client_iam.max.connections ou usando o Kafka AlterConfig API ou a kafka-configs.sh ferramenta. É importante observar que aumentar qualquer propriedade para um valor alto pode resultar em indisponibilidade.

  • Limites nas TCP conexões. Com as rajadas de taxa de conexão ativadas, MSK permite 100 conexões por segundo. A exceção é o tipo de instância kafka.t3.small, que permite 4 conexões por segundo com picos de taxa de conexão ativados. Clusters mais antigos que não têm picos de taxa de conexão ativados terão o recurso ativado automaticamente quando o cluster for corrigido.

    Para processar novas tentativas em conexões com falha, você pode definir o parâmetro de configuração reconnect.backoff.ms no lado do cliente. Por exemplo, se você quiser que um cliente tente novamente as conexões após 1 segundo, defina reconnect.backoff.ms como 1.000. Para obter mais informações, consulte reconnect.backoff.ms na documentação do Apache Kafka.

  • Até 100 configurações por conta. Para solicitar um aumento de limite por meio de Cotas de Serviço, acesse o console de Cotas de Serviço.

  • Máximo de 50 revisões por configuração.

  • Para atualizar a configuração ou a versão do Apache Kafka de um MSK cluster, primeiro certifique-se de que o número de partições por agente esteja abaixo dos limites descritos em. Dimensione seu cluster adequadamente: número de partições por agente

MSKCotas do replicador

  • Máximo de 15 MSK replicadores por conta.

  • MSKO Replicator replica somente até 750 tópicos em ordem ordenada. Se você precisar replicar mais tópicos, recomendamos criar um replicador separado. Acesse o console Service Quotas se precisar de suporte para mais de 750 tópicos por replicador. Você pode monitorar o número de tópicos que estão sendo replicados usando a métrica TopicCount "”.

  • Uma taxa de transferência máxima de entrada de 1 GB por segundo por replicador. MSK Solicite uma cota maior acessando o console Service Quotas.

  • MSKTamanho do registro do replicador - Um tamanho máximo de registro de 10 MB (message.max.bytes). Solicite uma cota maior acessando o console Service Quotas.

MSKCota sem servidor

nota

Se você tiver algum problema com os limites da cota de serviço, crie um caso de suporte com seu caso de uso e o limite solicitado.

Salvo indicação em contrário, os limites são por cluster.
Dimensão Quota Resultado de violação de cota

Throughput máximo de entrada

200 MBps

Desaceleração com duração de controle de utilização em resposta

Throughput máximo de saída 400 MBps

Desaceleração com duração de controle de utilização em resposta

Duração máxima de retenção Ilimitado N/D

Número máximo de conexões de cliente

3000 Fechamento da conexão
Máximo de tentativas de conexão 100 por segundo Fechamento da conexão

Tamanho máximo de mensagem

8 MB A solicitação falha com ErrorCode: INVALID_ REQUEST
Taxa máxima de solicitação 15.000 por segundo Desaceleração com duração de controle de utilização em resposta

Taxa máxima de APIs solicitações de gerenciamento de tópicos

2 por segundo Desaceleração com duração de controle de utilização em resposta

Máximo de bytes de busca por solicitação

55 MB

A solicitação falha com ErrorCode: INVALID_ REQUEST

Número máximo de grupos de consumidores

500 JoinGroup falha na solicitação
Número máximo de partições (líderes) 2.400 para tópicos não compactados, 120 para tópicos compactados. Para solicitar um ajuste de cota de serviço, crie um caso de suporte com seu caso de uso e limite solicitado. A solicitação falha com ErrorCode: INVALID_ REQUEST
Taxa máxima de criação e exclusão de partições 250 em 5 minutos A solicitação falha com ErrorCode: THROUGHPUT _ QUOTA _ EXCEEDED

Throughput máximo de entrada por partição

5 MBps Desaceleração com duração de controle de utilização em resposta

Throughput máximo de saída por partição

10 MBps Desaceleração com duração de controle de utilização em resposta

Tamanho máximo da partição (para tópicos compactados)

250 GB A solicitação falha com ErrorCode: THROUGHPUT _ QUOTA _ EXCEEDED
Número máximo de clientes VPCs por cluster sem servidor 5
Número máximo de clusters com tecnologia sem servidor por conta 10. Para solicitar um ajuste de cota de serviço, crie um caso de suporte com seu caso de uso e limite solicitado.

MSKCota Connect

  • Até 100 plug-ins personalizados.

  • Até 100 configurações de operador.

  • Até 60 operadores conectados. Se um conector estiver configurado para ter capacidade de escalabilidade automática, o número máximo de trabalhadores que o conector está configurado para ter é o número que o MSK Connect usa para calcular a cota da conta.

  • Até 10 operadores por conector.

Para solicitar uma cota maior para o MSK Connect, acesse o console Service Quotas.