Présentation
Cloud Dataflow est un service entièrement géré permettant de transformer et d’enrichir les données en mode flux (temps réel) ou lot (historique) avec une fiabilité et une expressivité égales.
Utilisez l’intégration Datadog/Google Cloud pour recueillir des métriques de Google Cloud Dataflow.
Configuration
Collecte de métriques
Installation
Si vous ne l’avez pas déjà fait, configurez d’abord l’intégration Google Cloud Platform. Aucune autre procédure d’installation n’est requise.
Collecte de logs
Les logs Google Cloud Dataflow sont recueillis avec Google Cloud Logging et envoyés à un Cloud Pub/Sub via un forwarder Push HTTP. Si vous ne l’avez pas déjà fait, configurez un Cloud Pub/Sub à l’aide d’un forwarder Push HTTP.
Une fois cette opération effectuée, exportez vos logs Google Cloud Dataflow depuis Google Cloud Logging vers le Pub/Sub :
Accédez à la page Google Cloud Logging et filtrez les logs Google Cloud Dataflow.
Cliquez sur Create Sink et nommez le récepteur.
Choisissez Cloud Pub/Sub comme destination et sélectionnez le Pub/Sub créé à cette fin. Remarque : le Pub/Sub peut se situer dans un autre projet.
Cliquez sur Create et attendez que le message de confirmation s’affiche.
Données collectées
Métriques
Événements
L’intégration Google Cloud Dataflow n’inclut aucun événement.
Checks de service
L’intégration Google Cloud Dataflow n’inclut aucun check de service.
Dépannage
Besoin d’aide ? Contactez l’assistance Datadog.
