¿Cómo selecciono espacio de almacenamiento para una instancia de Kafka?

El espacio de almacenamiento es el espacio para almacenar mensajes (incluidos los mensajes en réplicas), logs y metadatos. Al especificar el espacio de almacenamiento, especifique el tipo y el tamaño del disco. Para obtener más información acerca de los discos, vea la secciónTipos y rendimiento de disco.

Por ejemplo, si el tamaño de disco necesario para almacenar datos durante el período de retención es de 100 GB, la capacidad del disco debe ser de 100 GB x Número de réplicas + 100 GB (Espacio pedido) como mínimo. En un clúster de Kafka, cada nodo utiliza un disco de 33 GB para almacenar logs y datos de ZooKeeper. Por lo tanto, el espacio de almacenamiento disponible real es menor que el espacio de almacenamiento comprado.

El número de réplicas (3 de forma predeterminada) se puede configurar al crear un tema. Si se ha habilitado la creación automática de temas, cada tema creado automáticamente tiene tres réplicas de forma predeterminada. Puede cambiar esta cantidad estableciendo default.replication.factor en la página de fichas Parameters.