Agentes Express de Amazon MSK - Transmisión administrada de Amazon para Apache Kafka

Agentes Express de Amazon MSK

Los agentes Express para MSK aprovisionado simplifican la administración de Apache Kafka, resultan más rentables para operar a escala y ofrecen mayor elasticidad con la baja latencia esperada. Los agentes incluyen almacenamiento de pago por uso que se escala automáticamente y no requiere dimensionamiento, aprovisionamiento ni supervisión proactiva. Según el tamaño de instancia seleccionado, cada nodo de agente puede proporcionar hasta tres veces más rendimiento por agente, escalar verticalmente hasta 20 veces más rápido y recuperarse un 90 % más rápido en comparación con los agentes Standard de Apache Kafka. Los agentes Express vienen preconfigurados con los valores predeterminados de prácticas recomendadas de Amazon MSK y aplican cuotas de rendimiento del cliente para minimizar la contención de recursos entre los clientes y las operaciones en segundo plano de Kafka.

A continuación, se presentan algunas características clave y capacidades que se deben considerar al utilizar agentes Express.

  • Sin administración del almacenamiento: los agentes Express eliminan la necesidad de aprovisionar o administrar recursos de almacenamiento. Obtiene almacenamiento elástico, prácticamente ilimitado, de pago por uso y completamente administrado. Para casos de uso de alto rendimiento, no es necesario analizar las interacciones entre las instancias de computación y los volúmenes de almacenamiento, ni los cuellos de botella de rendimiento asociados. Estas capacidades simplifican la administración del clúster y eliminan la sobrecarga operativa asociada a la administración del almacenamiento.

  • Escalado más rápido: los agentes Express permiten escalar el clúster y mover particiones hasta 20 veces más rápido que con agentes Standard. Esta capacidad es fundamental cuando necesita escalar horizontalmente el clúster para gestionar picos de carga entrantes o reducir horizontalmente para disminuir costos. Para obtener más información sobre el escalado del clúster, consulte las secciones ampliación del clúster, eliminación de agentes, reasignación de particiones y configuración de Cruise Control de LinkedIn para el reequilibrio.

  • Mayor rendimiento: los agentes Express ofrecen hasta tres veces más rendimiento por agente que los agentes Standard. Por ejemplo, puede escribir datos de forma segura a una velocidad de hasta 500 MBps con cada agente Express de tamaño m7g.16xlarge, en comparación con 153,8 MBps en el agente Standard equivalente (ambas cifras asumen una asignación de ancho de banda suficiente para operaciones en segundo plano, como la replicación y el reequilibrio).

  • Configurado para alta resiliencia: los agentes Express ofrecen automáticamente diversas prácticas recomendadas para mejorar la resiliencia del clúster. Estas incluyen barreras de protección en configuraciones críticas de Apache Kafka, cuotas de rendimiento y reservas de capacidad para operaciones en segundo plano y reparaciones no planificadas. Estas capacidades hacen que sea más seguro y sencillo ejecutar aplicaciones de Apache Kafka a gran escala. Consulte las secciones Configuraciones de agentes Express y Cuota de agentes Express de Amazon MSK para obtener más detalles.

  • Sin periodos de mantenimiento: no existen periodos de mantenimiento para los agentes Express. Amazon MSK actualiza automáticamente el hardware del clúster de forma continua. Consulte Aplicación de parches para agentes Express para obtener más detalles.

Información adicional sobre los agentes Express

  • Los agentes Express funcionan con las API de Apache Kafka, pero aún no admiten completamente la API de KStreams.

  • Los agentes Express solo están disponibles en una configuración de tres zonas de disponibilidad (3 AZ).

  • Los agentes Express solo están disponibles en determinados tamaños de instancia. Consulte Precios de Amazon MSK para obtener la lista actualizada.

  • Los agentes Express son compatibles con las versiones 3.6 y 3.8 de Apache Kafka.

Consulte estos blogs

Para obtener más información sobre los agentes Express de MSK y ver un ejemplo práctico de agentes Express en uso, lea los siguientes blogs: