IntégrationGoogle Cloud Dataproc monitoring

L'intégration de New Relic inclut une intégration permettant de signaler vos données GCP Dataproc à nos produits. Nous expliquons ici comment activer l'intégration et quelles données elle collecte.

Activer l'intégration

Pour activer l'intégration, suivez les procédures standard pour connecter votre service GCP à New Relic.

configuration et sondage

Vous pouvez modifier la fréquence d'interrogation et filtrer les données à l'aide des options de configuration.

Informations d'interrogation par défaut pour l'intégration GCP Dataproc :

Intervalle d'interrogation de New Relic : 5 minutes

Rechercher et utiliser des données

Pour trouver vos données d’intégration, accédez à one.newrelic.com > All capabilities > Infrastructure > GCP et sélectionnez une intégration.

Les données sont jointes au type d’événement suivant :

Entité	Type d'événement	Fournisseur
Cluster	`GcpDataprocClusterSample`	`GcpDataprocCluster`

Pour en savoir plus sur l’utilisation de vos données, consultez Comprendre et utiliser les données d’intégration.

données métriques

Cette intégration collecte les données GCP Dataproc pour Cluster.

Données Cluster Dataproc

métrique	Unité	Description
`cluster.hdfs.Datanodes`	Compter	Indique le nombre de DataNodes HDFS en cours d'exécution dans un cluster.
`cluster.hdfs.StorageCapacity`	Gibioctets	Indique la capacité du système HDFS exécuté sur le cluster en Go.
`cluster.hdfs.StorageUtilization`	Pour cent	Le pourcentage de stockage HDFS actuellement utilisé.
`cluster.hdfs.UnhealthyBlocks`	Compter	Indique le nombre de blocs défectueux à l'intérieur du cluster.
`cluster.job.CompletionTime`	Secondes	Le temps nécessaire à l'exécution des tâches à partir du moment où l'utilisateur soumet une tâche jusqu'au moment où Dataproc signale qu'elle est terminée.
`cluster.job.Duration`	Secondes	Le temps que les emplois ont passé dans un état donné.
`cluster.job.Failures`	Compter	Indique le nombre de tâches qui ont échoué sur un cluster.
`cluster.job.Running`	Compter	Indique le nombre de tâches en cours d'exécution sur un cluster.
`cluster.job.Submitted`	Compter	Indique le nombre de tâches qui ont été soumises à un cluster.
`cluster.operation.CompletionTime`	Secondes	Le temps nécessaire aux opérations pour se terminer à partir du moment où l'utilisateur soumet une opération jusqu'au moment où Dataproc signale qu'elle est terminée.
`cluster.operation.Duration`	Secondes	Le temps que les opérations ont passé dans un état donné.
`cluster.operation.Failures`	Compter	Indique le nombre d’opérations qui ont échoué sur un cluster.
`cluster.operation.Running`	Compter	Indique le nombre d’opérations en cours d’exécution sur un cluster.
`cluster.operation.Submitted`	Compter	Indique le nombre d'opérations qui ont été soumises à un cluster.
`cluster.yarn.AllocatedMemoryPercentage`	Pour cent	Le pourcentage de mémoire YARN est alloué.
`cluster.yarn.Apps`	Compter	Indique le nombre d'applications YARN actives.
`cluster.yarn.Containers`	Compter	Indique le nombre de conteneurs YARN.
`cluster.yarn.MemorySize`	Gibioctets	Indique la taille de la mémoire YARN en Go.
`cluster.yarn.Nodemanagers`	Compter	Indique le nombre de NodeManagers YARN exécutés à l'intérieur du cluster.
`cluster.yarn.PendingMemorySize`	Gibioctets	La demande de mémoire actuelle, en Go, qui est en attente d'être satisfaite par le planificateur.
`cluster.yarn.VirtualCores`	Compter	Indique le nombre de cœurs virtuels dans YARN.