Configuration de la surveillance des requêtes

Query History Monitoring and Management (QHMM) est un service qui stocke et gère les données de diagnostic, telles que les heap dumps, les thread dumps, l'historique des requêtes et les informations relatives aux événements des requêtes du moteur Presto dans le stockage associé à un catalogue Hive. Vous pouvez récupérer les fichiers historiques pour analyser, déboguer ou surveiller les requêtes. Vous pouvez également stocker les données dans votre propre compartiment.

Presto ( Java ) les moteurs des instances du plan watsonx.data Lite ne prennent pas en charge le QHMM.

Vous pouvez activer ou désactiver le service QHMM pour votre instance watsonx.data Si vous activez le service QHMM, vous devez spécifier la mémoire à utiliser pour stocker les données de la requête. Vous devez créer et associer un catalogue Hive pour stocker les données du QHMM (register your own storage (BYOB)). Pour utiliser BYOB, enregistrez votre seau dans watsonx.data et configurez-le pour l'utiliser en tant que stockage QHMM.

QHMM ne prend en charge que le stockage Hive.

Activation de la fonction QHMM

Vous pouvez activer la fonction QHMM de l'une des manières suivantes :

Dans l'assistant de démarrage rapide, lors du provisionnement de watsonx.data Voir Configuration de la surveillance des requêtes.
Depuis la consolewatsonx.data > Page de suivi des requêtes.

Vous pouvez récupérer les fichiers d'historique pour analyser, déboguer ou surveiller les requêtes. Dans l'espace de travail Query, voir Récupération des informations de la requête à partir des données QHMM.

Procédure

Connectez vous à la console watsonx.data.
Dans le menu de navigation, sélectionnez Configurations.
Cliquez sur Surveillance des requêtes. La page de suivi des requêtes s'ouvre.
Si vous avez activé la fonction QHMM au moment du provisionnement de watsonx.data quick start, vous pouvez voir les détails de la configuration QHMM. Les détails suivants sont disponibles :
- Statut de QHMM - Activé ou désactivé.
- Moteur permettant d'accéder aux données du QHMM et de les interroger.
- Compartiment configuré pour stocker les données QHMM.
- Sous-chemin dans le compartiment où les données QHMM sont disponibles.
Pour modifier les détails de la configuration, cliquez sur Modifier et effectuez les changements nécessaires. Vous pouvez activer ou désactiver QHMM, modifier le moteur associé au catalogue QHMM, modifier le seau et mettre à jour le sous-chemin de stockage.
Cliquez sur Sauvegarder après avoir effectué les modifications.

Activation de la QHMM à partir de la console

Si la fonction QHMM n'est pas activée au moment du provisionnement de watsonx.data quick start, vous pouvez le faire à partir de la page Query monitoring.

Créer une paire storage - catlaogApache Hive) dans watsonx.data Voir Ajout d'une paire de catalogues de stockage. QHMM ne prend en charge que le catalogue Apache Hive.
Dans la page de suivi des requêtes, cliquez sur Modifier.
Cochez la case Activer. Vous ne pouvez cocher cette case que si vous avez créé un catalogue Hive dans watsonx.data
Sélectionnez le moteur à partir de Engine.
Sélectionnez le catalogue Hive à partir de Storage.
Vous pouvez également mettre à jour le sous-chemin.
Cliquez sur Sauvegarder après avoir effectué les modifications.

Activation de la fonction d'élagage des données

Vous pouvez activer la fonction d'élagage des données pour QHMM à partir de la page de surveillance des requêtes. Pour ce faire :

Dans la page de suivi des requêtes, cliquez sur Modifier. Dans la section Élagage des données, activez la fonctionnalité d'élagage des fichiers dans QHMM pour gérer la capacité de stockage. Vous pouvez configurer la taille maximale et le pourcentage de seuil pour l'unité de stockage QHMM. Lorsque le seuil est atteint pendant le téléchargement des fichiers ou lorsqu'un planificateur de nettoyage est exécuté (par défaut toutes les 24 heures), les données plus anciennes sont supprimées.

Indiquez les informations suivantes :

Seuil d'élagage : Seuil à partir duquel QHMM déclenche l'élagage ou émet un avertissement lorsque la capacité atteint le pourcentage seuil (par défaut : 80 %).
Fréquence d'élagage : Fréquence en heures à laquelle l'élagage a lieu (par défaut : 24 heures).
Utilisation maximale : Capacité maximale du godet en Mo (par défaut : 10240 Mo).
Période de conservation des enregistrements élagués : Durée d'expiration des enregistrements en jours pour la suppression des enregistrements du COS (par défaut : 30 jours).

Cliquez sur Sauvegarder après avoir effectué les modifications.