Amazon Managed Streaming para Apache Kafka (MSK)

Documentos > Integraciones > Amazon Managed Streaming para Apache Kafka (MSK)

Información general

Amazon Managed Streaming para Apache Kafka (MSK) es un servicio totalmente gestionado que facilita la creación y ejecución de aplicaciones que utilizan Apache Kafka para procesar datos de streaming.

Esta integración utiliza un rastreador que recopila métricas de CloudWatch. Lee la página de Amazon MSK (Agent) para obtener información sobre la monitorización de MSK a través del Datadog Agent.

Configuración

Habilita el rastreador de Amazon MSK para ver las métricas de MSK desde CloudWatch en Datadog.

Instalación

Si aún no lo has hecho, configura primero la integración de Amazon Web Services.

Recopilación de métricas

En la página de la integración de AWS, asegúrate de que Kafka está activada en la pestaña Metric Collection.
Instala la integración de Amazon MSK.

APM

Activar logging

Configura Amazon MSK para enviar logs a un bucket de S3 o a CloudWatch.

Notas:

Si vas a loguear en un bucket de S3, asegúrate de que amazon_msk está configurado como Target prefix (Prefijo de destino).
Si vas a loguear en un grupo de logs de CloudWatch, asegúrate de que tu nombre contiene la subcadena msk.

Enviar logs a Datadog

Si aún no lo has hecho, configura la función de Lambda de Datadog Forwarder.
Una vez instalada la función de Lambda, añade manualmente un activador en el bucket de S3 o grupo de logs de CloudWatch que contenga tus logs de Amazon MSK en la consola de AWS:
- Añadir un activador manual en el bucket de S3
- Añadir un activador manual en el grupo de logs de CloudWatch