Amazon Elastic File System

Présentation

Amazon EFS est un système de stockage de fichiers simple et évolutif à utiliser avec les fonctions AWS Lambda ou les instances Amazon EC2.

Activez cette intégration pour recueillir toutes vos métriques EFS dans l’application Datadog.

Configuration

Installation

Si vous ne l’avez pas déjà fait, configurez d’abord l’intégration Amazon Web Services.

Collecte de métriques

  1. Dans le carré d’intégration AWS, assurez-vous que l’option EFS est cochée dans la section concernant la collecte des métriques.

  2. Ajoutez ces autorisations à votre stratégie IAM Datadog afin de recueillir des métriques d’Amazon EFS :

    • elasticfilesystem:DescribeTags : récupère les tags personnalisés appliqués aux systèmes de fichiers.
    • elasticfilesystem:DescribeFileSystems : fournit la liste des systèmes de fichiers actifs.

    Pour en savoir plus sur les stratégies EFS, consultez la documentation disponible sur le site d’AWS.

  3. Installez l’intégration Datadog/AWS EFS.

Collecte de logs

Activer le logging

Configurez Amazon EFS de façon à ce que ses logs soient envoyés vers un compartiment S3 ou vers Cloudwatch.

Remarque : si vous envoyez vos logs vers un compartiment S3, assurez-vous que amazon_efs est défini en tant que Target prefix.

Envoyer des logs à Datadog

  1. Si vous ne l’avez pas déjà fait, configurez la fonction Lambda de collecte de logs AWS avec Datadog.

  2. Une fois la fonction Lambda installée, ajoutez manuellement un déclencheur sur le compartiment S3 ou sur le groupe de logs Cloudwatch qui contient vos logs Amazon EFS dans la console AWS :

Amazon EFS pour Lambda

Amazon EFS pour Lambda vous permet d’associer un EFS à vos fonctions Lambda. Avec EFS pour Lambda, les organisations ont la possibilité de simplifier leurs charges de travail d’apprentissage automatique et de traitement de données en faisant appel au sans serveur. Pour diviser les métriques Lambda et les logs par EFS :

  1. Installez l’intégration AWS Lambda et activez la collecte des métriques.

  2. Ajoutez cette autorisation à votre stratégie IAM Datadog :

    • elasticfilesystem:DescribeAccessPoints : Énumère les instances EFS actives connectées aux fonctions Lambda

Données collectées

Métriques

aws.efs.burst_credit_balance
(gauge)
The average burst credit balance during the period.
Shown as byte
aws.efs.burst_credit_balance.maximum
(gauge)
The largest burst credit balance for any minute during the period.
Shown as byte
aws.efs.burst_credit_balance.minimum
(gauge)
The smallest burst credit balance for any minute during the period.
Shown as byte
aws.efs.client_connections
(count)
The number of Amazon EC2 instances that are connected to a file system.
aws.efs.data_read_iobytes
(count)
The total number of bytes associated with read operations.
Shown as byte
aws.efs.data_read_iobytes.average
(count)
The average size of read operations during the period.
Shown as byte
aws.efs.data_read_iobytes.maximum
(count)
The size of the largest read operation during the period.
Shown as byte
aws.efs.data_read_iobytes.minimum
(count)
The size of the smallest read operation during the period.
Shown as byte
aws.efs.data_read_iobytes.samplecount
(count)
The sample count of the number of data points used for read operation metrics.
Shown as unit
aws.efs.data_write_iobytes
(count)
The sum of the number bytes associated with write operations.
Shown as byte
aws.efs.data_write_iobytes.average
(count)
The average size of write operations during the period.
Shown as byte
aws.efs.data_write_iobytes.maximum
(count)
The size of the largest write operation during the period.
Shown as byte
aws.efs.data_write_iobytes.minimum
(count)
The size of the smallest write operation during the period.
Shown as byte
aws.efs.data_write_iobytes.samplecount
(count)
The sample count of the number of data points used for write operation metrics.
Shown as unit
aws.efs.metadata_iobytes
(count)
The total number of bytes associated with metadata operations.
Shown as byte
aws.efs.metadata_iobytes.average
(count)
The average metadata operation during the period.
Shown as byte
aws.efs.metadata_iobytes.maximum
(count)
The size of the largest metadata operation during the period.
Shown as byte
aws.efs.metadata_iobytes.minimum
(count)
The size of the smallest metadata operation during the period.
Shown as byte
aws.efs.metadata_iobytes.samplecount
(count)
The sample count of the number of data points used for metadata operation metrics.
Shown as unit
aws.efs.metered_iobytes
(gauge)
The average size of an operation during the period.
Shown as byte
aws.efs.metered_iobytes.maximum
(gauge)
The size of the largest operation during the period.
Shown as byte
aws.efs.metered_iobytes.minimum
(gauge)
The size of the smallest operation during the period.
Shown as byte
aws.efs.metered_iobytes.samplecount
(gauge)
A count of metadata operations.
Shown as byte
aws.efs.metered_iobytes.sum
(gauge)
The total number of bytes associated with metadata operations.
Shown as byte
aws.efs.percent_iolimit
(gauge)
Shows how close a file system is to reaching the I/O limit of the general purpose performance mode.
Shown as percent
aws.efs.permitted_throughput
(gauge)
The average throughput permitted during the period.
Shown as byte
aws.efs.permitted_throughput.maximum
(gauge)
The highest throughput permitted for any minute during the period.
Shown as byte
aws.efs.permitted_throughput.minimum
(gauge)
The smallest throughput permitted for any minute during the period.
Shown as byte
aws.efs.storage_bytes
(gauge)
The latest known metered size (in bytes) of data stored in the file system, including both storage classes.
Shown as byte
aws.efs.total_iobytes
(count)
The total number of bytes associated with all file system operations
Shown as byte
aws.efs.total_iobytes.average
(count)
The average size of an operation during the period
Shown as byte
aws.efs.total_iobytes.maximum
(count)
The size of the largest operation during the period.
Shown as byte
aws.efs.total_iobytes.minimum
(count)
The size of the smallest operation during a period.
Shown as byte
aws.efs.total_iobytes.samplecount
(count)
The sample count of the number of data points used for file system operation metrics.
Shown as unit

Chacune des métriques récupérées à partir d’AWS se verra assigner les mêmes tags que ceux qui apparaissent dans la console AWS, y compris, mais sans s’y limiter, le hostname et les groupes de sécurité.

Événements

L’intégration AWS Elastic File System n’inclut aucun événement.

Checks de service

L’intégration AWS Elastic File System n’inclut aucun check de service.

Dépannage

Besoin d’aide ? Contactez l’assistance Datadog.

PREVIEWING: mervebolat/span-id-preprocessing