In diesem Dokument wird erläutert, wie Sie mit Cloud Monitoring den Dienststatus von Knowledge Catalog (ehemals Dataplex Universal Catalog) verfolgen, die Leistung optimieren und Einblick in Ihre Datenplattform erhalten. Proaktives Monitoring trägt dazu bei, die Zuverlässigkeit von Datenanwendungen zu gewährleisten und fundierte Entscheidungen zur Ressourcenverteilung und Kostenverwaltung zu treffen.
Informationen zu den Kosten finden Sie unter Cloud Monitoring-Preise.
Weitere Informationen zur Aufbewahrung von Messwertdaten finden Sie unter Monitoring-Kontingente und -Limits.
Anwendungsfälle
Sie können Knowledge Catalog-Messwerte in Cloud Monitoring verwenden, um die folgenden Anwendungsfälle zu unterstützen:
- Zuverlässigkeit von Datenpipelines gewährleisten: Überwachen Sie die Erfolgs- und Fehlerraten von Knowledge Catalog-Aufgaben wie Datenaufnahme oder Datenqualitätsjobs. Konfigurieren Sie Benachrichtigungen für Fehler oder ungewöhnliche Laufzeiten, um Ausfallzeiten für kritische Arbeitslasten zu minimieren.
- Leistung optimieren: Verfolgen Sie die Joblaufzeiten und Messwerte zur Ressourcennutzung, um Leistungsengpässe bei der Datenverarbeitung, der Datenqualität und der Datenermittlung zu erkennen und zu beheben.
- Kosten verwalten: Überwachen Sie den Ressourcenverbrauch von Knowledge Catalog, um Möglichkeiten zur Kostenoptimierung zu ermitteln, Budgetkontrollen durchzusetzen und eine effiziente Ressourcennutzung zu gewährleisten.
- Data Governance aufrechterhalten: Verfolgen Sie Messwerte im Zusammenhang mit der Metadatenermittlung und der Kataloganreicherung, um sicherzustellen, dass Datenassets gemäß Ihren Governance-Richtlinien gescannt und getaggt werden.
Funktionsweise
Knowledge Catalog ist in Cloud Monitoring integriert, das Messwerte, Ereignisse und Metadaten aus Knowledge Catalog-Diensten erfasst. Diese Messwerte liefern Einblicke in Bereiche wie den Jobausführungsstatus, die API-Nutzung und den Ressourcenstatus. Sie können diese Messwerte mit Tools in Cloud Monitoring analysieren, z. B. mit dem Metrics Explorer, benutzerdefinierten Dashboards und Benachrichtigungen. Mit diesen Tools können Sie das Verhalten Ihres Dienstes visualisieren, Leistungstrends erkennen und Benachrichtigungsrichtlinien erstellen, die Sie benachrichtigen, wenn die Leistung von den definierten Grenzwerten abweicht oder wenn Fehler auftreten.
Dienstmesswerte in Monitoring aufrufen
Messwerte zu Knowledge Catalog-Dienstressourcen werden automatisch für Knowledge Catalog-Dienste aktiviert. Verwenden Sie Monitoring, um diese Messwerte aufzurufen.
Sie können über die Google Cloud Console oder die Monitoring API auf Monitoring zugreifen.
Wenn Sie die Monitoring-Diagramme nicht sehen oder keine Benachrichtigungen erstellen können, benötigen Sie möglicherweise zusätzliche Monitoring-Berechtigungen.
Console
Rufen Sie in der Google Cloud Console die Seite Metrics Explorer auf.
Wählen Sie im Menü Messwert auswählen eine
Cloud Dataplex-Ressource aus.Wählen Sie eine Messwertkategorie und dann einen Messwert aus der Liste aus.
Wenn Sie Informationen zu einem Messwert aufrufen möchten, bewegen Sie den Mauszeiger auf den Messwertnamen.
Klicken Sie auf Übernehmen.
Optional: Wählen Sie Filter aus, gruppieren Sie nach Messwertlabels, führen Sie Aggregationen aus und wählen Sie Optionen für die Diagrammanzeige aus.
REST
Verwenden Sie die Methode timeSeries.list der Monitoring API, um Messwerte zu erfassen und aufzulisten, die durch einen filter Ausdruck definiert werden.