Logging und Monitoring arbeiten zusammen, um Ihnen zu helfen, die Anwendungsleistung zu verstehen und zu optimieren sowie Fehler und systembezogene Probleme zu diagnostizieren. Sie sollten Zusammenfassungslogs für alle API-Aufrufe und detaillierte Logs für fehlgeschlagene API-Aufrufe aktivieren, damit Sie die API Aufruflogs bereitstellen können, wenn Sie technischen Support benötigen.
Logging von Clientbibliotheken
Die Google Ads API-Clientbibliotheken enthalten ein integriertes Logging. Plattformspezifische Logging-Details finden Sie in der Logging-Dokumentation Ihrer ausgewählten Clientbibliothek.
| Sprache | Leitfaden |
|---|---|
| Java | Logging-Dokumentation für Java |
| .NET | Logging-Dokumentation für .NET |
| PHP | Logging-Dokumentation für PHP |
| Python | Logging-Dokumentation für Python |
| Ruby | Logging-Dokumentation für Ruby |
| Perl | Logging-Dokumentation für Perl |
Log format
Die Google Ads API-Clientbibliotheken generieren für jeden API-Aufruf ein detailliertes Log und ein Zusammenfassungs log. Das detaillierte Log enthält alle Details des API-Aufrufs, während das Zusammenfassungslog nur die minimalen Details des API-Aufrufs enthält. Es wird ein Beispiel für jede Art von Log gezeigt. Die Logs sind gekürzt und formatiert, um die Lesbarkeit zu verbessern.
Zusammenfassungslog
GoogleAds.SummaryRequestLogs Warning: 1 : [2023-09-15 19:58:39Z] -
Request made: Host: , Method: /google.ads.googleads.v24.services.GoogleAdsService/SearchStream,
ClientCustomerID: 5951878031, RequestID: hELhBPNlEDd8mWYcZu7b8g,
IsFault: True, FaultMessage: Status(StatusCode="InvalidArgument",
Detail="Request contains an invalid argument.")
Detailliertes Log
GoogleAds.DetailedRequestLogs Verbose: 1 : [2023-11-02 21:09:36Z] -
---------------BEGIN API CALL---------------
Request
-------
Method Name: /google.ads.googleads.v24.services.GoogleAdsService/SearchStream
Host:
Headers: {
"x-goog-api-client": "gl-dotnet/5.0.0 gapic/17.0.1 gax/4.2.0 grpc/2.46.3 gccl/3.0.1 pb/3.21.5",
"developer-token": "REDACTED",
"login-customer-id": "1234567890",
"x-goog-request-params": "customer_id=4567890123"
}
{ "customerId": "4567890123", "query": "SELECT ad_group_criterion.type FROM
ad_group_criterion WHERE ad_group.status IN(ENABLED, PAUSED) AND
campaign.status IN(ENABLED, PAUSED) ", "summaryRowSetting": "NO_SUMMARY_ROW" }
Response
--------
Headers: {
"date": "Thu, 02 Nov 2023 21:09:35 GMT",
"alt-svc": "h3-29=\":443\"; ma=2592000"
}
{
"results": [ {
"adGroupCriterion": {
"resourceName": "customers/4567890123/adGroupCriteria/456789456789~123456123467",
"type": "KEYWORD"
} }, {
"adGroupCriterion": {
"resourceName": "customers/4567890123/adGroupCriteria/456789456789~56789056788",
"type": "KEYWORD"
} } ],
"fieldMask": "adGroupCriterion.type", "requestId": "VsJ4F00ew6s9heHvAJ-abw"
}
----------------END API CALL----------------
Was mache ich, wenn ich keine Clientbibliothek verwende?
Wenn Sie keine Clientbibliothek verwenden, implementieren Sie Ihr eigenes Logging, um die Details der ausgehenden und eingehenden API-Aufrufe zu erfassen. Sie sollten mindestens den
Wert des request-id Antwortheaders protokollieren, der bei Bedarf an die
technischen Supportteams weitergegeben werden kann.
Logging in der Cloud
Es gibt viele Tools, mit denen Sie Logs und Leistungsmesswerte für Ihre Anwendung erfassen können. Mit Google Cloud Logging können Sie beispielsweise Leistungsmesswerte in Ihrem Google Cloud-Projekt protokollieren. So können Sie Dashboards und Benachrichtigungen in Google Cloud Monitoring einrichten, um die protokollierten Messwerte zu nutzen.
Cloud Logging bietet Clientbibliotheken für alle unterstützten Sprachen der Google Ads API-Client bibliotheken außer Perl. In den meisten Fällen ist es daher möglich, direkt aus Ihrer Clientbibliotheksintegration mit Cloud Logging zu protokollieren. Für andere Sprachen einschließlich Perl, bietet Cloud Logging auch eine REST API.
Es gibt verschiedene Möglichkeiten, Logs aus einer Google Ads API-Clientbibliothek in Cloud Logging oder ein anderes Tool zu schreiben. Jede Option hat ihre eigenen Vor- und Nachteile in Bezug auf Implementierungszeit, Komplexität und Leistung. Berücksichtigen Sie diese Vor- und Nachteile sorgfältig, bevor Sie sich für eine Lösung entscheiden.
Option 1: Lokale Logs über einen Hintergrundprozess in die Cloud schreiben
Clientbibliothekslogs können in eine lokale Datei auf Ihrem Computer geschrieben werden, indem Sie die Logging-Konfiguration ändern. Sobald die Logs in eine lokale Datei ausgegeben wurden, können Sie einen Daemon einrichten, um die Logs zu erfassen und an die Cloud zu senden.
Eine Einschränkung dieses Ansatzes besteht darin, dass einige Leistungsmesswerte standardmäßig nicht erfasst werden. Clientbibliothekslogs enthalten Details aus den Anfrage- und Antwortobjekten. Latenzmesswerte sind daher nicht enthalten, es sei denn, es werden zusätzliche Änderungen vorgenommen, um auch diese zu protokollieren.
Option 2: Anwendung in Compute Engine ausführen und Ops-Agent installieren
Wenn Ihre Anwendung in Compute Engine ausgeführt wird, können Sie Ihre Logs an Google Cloud Logging senden, indem Sie den Ops-Agent installieren. Der Ops Agent kann so konfiguriert werden, dass er zusätzlich zu den standardmäßig gesendeten Messwerten und Logs auch Ihre Anwendungsprotokolle an Cloud Logging sendet.
Wenn Ihre Anwendung bereits in einer Google Cloud-Umgebung ausgeführt wird oder Sie erwägen, Ihre Anwendung zu Google Cloud zu migrieren, ist dies eine gute Option.
Option 3: Logging im Anwendungscode implementieren
Das Logging direkt aus dem Anwendungscode kann auf zwei Arten erfolgen:
Messwertberechnungen und Log-Anweisungen an allen relevanten Stellen im Code einfügen. Diese Option ist für kleinere Codebasen besser geeignet, da der Umfang und die Wartungskosten einer solchen Änderung minimal wären.
Eine Logging-Schnittstelle implementieren. Wenn die Anwendungslogik abstrahiert werden kann, sodass verschiedene Teile der Anwendung von derselben Basisklasse erben, kann die Logging-Logik in dieser Basisklasse implementiert werden. Diese Option wird im Allgemeinen bevorzugt, da sie einfacher zu warten und zu skalieren ist. Bei größeren Codebasen sind die Wartungsfreundlichkeit und Skalierbarkeit dieser Lösung umso wichtiger.
Eine Einschränkung dieses Ansatzes besteht darin, dass die vollständigen Anfrage- und Antwortlogs nicht über den Anwendungscode verfügbar sind. Auf vollständige Anfrage- und Antwortobjekte kann über gRPC-Interceptors zugegriffen werden. So werden die Anfrage- und Antwortlogs für das integrierte Logging der Clientbibliothek abgerufen. Im Falle eines Fehlers sind möglicherweise zusätzliche Informationen im Ausnahmeobjekt verfügbar, aber für erfolgreiche Antworten sind in der Anwendungslogik weniger Details verfügbar. In den meisten Fällen ist die Anfrage-ID für eine erfolgreiche Anfrage beispielsweise nicht über die Google Ads API-Antwortobjekte zugänglich.
Option 4: Benutzerdefinierten gRPC-Logging-Interceptor implementieren
gRPC unterstützt unäre und Streaming-Interceptors, die auf die Anfrage- und Antwortobjekte zugreifen können, wenn sie zwischen dem Client und dem Server übertragen werden. Die Google Ads API-Clientbibliotheken verwenden gRPC-Interceptors, um integriertes Logging zu ermöglichen. Ebenso können Sie einen benutzerdefinierten gRPC-Interceptor implementieren, um auf die Anfrage- und Antwortobjekte zuzugreifen, Informationen für Logging- und Monitoring-Zwecke zu extrahieren und diese Daten an den gewünschten Ort zu schreiben.
Im Gegensatz zu einigen der hier vorgestellten anderen Lösungen bietet die Implementierung eines benutzerdefinierten gRPC-Interceptors die Flexibilität, Anfrage- und Antwortobjekte für jede Anfrage zu erfassen und zusätzliche Logik zu implementieren, um Details der Anfrage zu erfassen. Sie können beispielsweise die verstrichene Zeit einer Anfrage berechnen, indem Sie eine Logik für die Leistungsmessung im benutzerdefinierten Interceptor implementieren, und dann den Messwert in Google Cloud Logging protokollieren, um ihn für die Latenzüberwachung in Google Cloud Monitoring verfügbar zu machen.
Benutzerdefinierter Google Cloud Logging-Interceptor in Python
Um diese Lösung zu veranschaulichen, haben wir ein Beispiel für einen benutzerdefinierten Logging-Interceptor in Python geschrieben. Der benutzerdefinierte Interceptor wird erstellt und an den Dienstclient übergeben. Anschließend greift er bei jedem Methodenaufruf auf die Anfrage- und Antwortobjekte zu, verarbeitet Daten aus diesen Objekten und sendet die Daten an Google Cloud Logging.
Zusätzlich zu den Daten aus den Anfrage- und Antwortobjekten implementiert das Beispiel eine zusätzliche Logik, um die verstrichene Zeit der Anfrage und einige andere Metadaten zu erfassen, die für das Monitoring nützlich sind, z. B. ob die Anfrage erfolgreich war. Weitere Informationen dazu, wie diese Informationen sowohl allgemein für das Monitoring als auch speziell in Kombination mit Google Cloud Logging und Google Cloud Monitoring nützlich sein können, finden Sie im Leitfaden zum Monitoring.
# Copyright 2022 Google LLC # # Licensed under the Apache License, Version 2.0 (the "License"); # you may not use this file except in compliance with the License. # You may obtain a copy of the License at # # https://www.apache.org/licenses/LICENSE-2.0 # # Unless required by applicable law or agreed to in writing, software # distributed under the License is distributed on an "AS IS" BASIS, # WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied. # See the License for the specific language governing permissions and # limitations under the License. """A custom gRPC Interceptor that logs requests and responses to Cloud Logging. The custom interceptor object is passed into the get_service method of the GoogleAdsClient. It intercepts requests and responses, parses them into a human readable structure and logs them using the logging service instantiated within the class (in this case, a Cloud Logging client). """ import time from typing import Any, Callable, Dict, Optional from google.cloud import logging as google_cloud_logging from grpc._interceptor import _ClientCallDetails from google.ads.googleads.interceptors import LoggingInterceptor class CloudLoggingInterceptor(LoggingInterceptor): """An interceptor that logs rpc request and response details to Google Cloud Logging. This class inherits logic from the LoggingInterceptor, which simplifies the implementation here. Some logic is required here in order to make the underlying logic work -- comments make note of this where applicable. NOTE: Inheriting from the LoggingInterceptor class could yield unexpected side effects. For example, if the LoggingInterceptor class is updated, this class would inherit the updated logic, which could affect its functionality. One option to avoid this is to inherit from the Interceptor class instead, and selectively copy whatever logic is needed from the LoggingInterceptor class.""" def __init__(self, api_version: str): """Initializer for the CloudLoggingInterceptor. Args: api_version: a str of the API version of the request. """ super().__init__(logger=None, api_version=api_version) # Instantiate the Cloud Logging client. logging_client: google_cloud_logging.Client = google_cloud_logging.Client() self.logger: google_cloud_logging.Logger = logging_client.logger("cloud_logging") self.rpc_start: float self.rpc_end: float def log_successful_request( self, method: str, customer_id: Optional[str], metadata_json: str, request_id: str, request: Any, # google.ads.googleads.vX.services.types.SearchGoogleAdsRequest or SearchGoogleAdsStreamRequest trailing_metadata_json: str, response: Any, # grpc.Call or grpc.Future ) -> None: """Handles logging of a successful request. Args: method: The method of the request. customer_id: The customer ID associated with the request. metadata_json: A JSON str of initial_metadata. request_id: A unique ID for the request provided in the response. request: An instance of a request proto message. trailing_metadata_json: A JSON str of trailing_metadata. response: A grpc.Call/grpc.Future instance. """ # Retrieve and mask the RPC result from the response future. # This method is available from the LoggingInterceptor class. # Ensure self._cache is set in order for this to work. # The response result could contain up to 10,000 rows of data, # so consider truncating this value before logging it, to save # on data storage costs and maintain readability. result: Any = self.retrieve_and_mask_result(response) # elapsed_ms is the approximate elapsed time of the RPC, in milliseconds. # There are different ways to define and measure elapsed time, so use # whatever approach makes sense for your monitoring purposes. # rpc_start and rpc_end are set in the intercept_unary_* methods below. elapsed_ms: float = (self.rpc_end - self.rpc_start) * 1000 debug_log: Dict[str, Any] = { "method": method, "host": metadata_json, "request_id": request_id, "request": str(request), "headers": trailing_metadata_json, "response": str(result), "is_fault": False, "elapsed_ms": elapsed_ms, } self.logger.log_struct(debug_log, severity="DEBUG") info_log: Dict[str, Any] = { "customer_id": customer_id, "method": method, "request_id": request_id, "is_fault": False, # Available from the Interceptor class. "api_version": self._api_version, } self.logger.log_struct(info_log, severity="INFO") def log_failed_request( self, method: str, customer_id: Optional[str], metadata_json: str, request_id: str, request: Any, # google.ads.googleads.vX.services.types.SearchGoogleAdsRequest or SearchGoogleAdsStreamRequest trailing_metadata_json: str, response: Any, # grpc.Call or grpc.Future ) -> None: """Handles logging of a failed request. Args: method: The method of the request. customer_id: The customer ID associated with the request. metadata_json: A JSON str of initial_metadata. request_id: A unique ID for the request provided in the response. request: An instance of a request proto message. trailing_metadata_json: A JSON str of trailing_metadata. response: A JSON str of the response message. """ exception: Any = self._get_error_from_response(response) exception_str: str = self._parse_exception_to_str(exception) fault_message: str = self._get_fault_message(exception) info_log: Dict[str, Any] = { "method": method, "endpoint": self.endpoint, "host": metadata_json, "request_id": request_id, "request": str(request), "headers": trailing_metadata_json, "exception": exception_str, "is_fault": True, } self.logger.log_struct(info_log, severity="INFO") error_log: Dict[str, Any] = { "method": method, "endpoint": self.endpoint, "request_id": request_id, "customer_id": customer_id, "is_fault": True, "fault_message": fault_message, } self.logger.log_struct(error_log, severity="ERROR") def intercept_unary_unary( self, continuation: Callable[[_ClientCallDetails, Any], Any], # Any is request type client_call_details: _ClientCallDetails, request: Any, # google.ads.googleads.vX.services.types.SearchGoogleAdsRequest ) -> Any: # grpc.Call or grpc.Future """Intercepts and logs API interactions. Overrides abstract method defined in grpc.UnaryUnaryClientInterceptor. Args: continuation: a function to continue the request process. client_call_details: a grpc._interceptor._ClientCallDetails instance containing request metadata. request: a SearchGoogleAdsRequest or SearchGoogleAdsStreamRequest message class instance. Returns: A grpc.Call/grpc.Future instance representing a service response. """ # Set the rpc_end value to current time when RPC completes. def update_rpc_end(response_future: Any) -> None: # response_future is grpc.Future self.rpc_end = time.perf_counter() # Capture precise clock time to later calculate approximate elapsed # time of the RPC. self.rpc_start = time.perf_counter() # The below call is REQUIRED. response: Any = continuation(client_call_details, request) # response is grpc.Call or grpc.Future response.add_done_callback(update_rpc_end) self.log_request(client_call_details, request, response) # The below return is REQUIRED. return response def intercept_unary_stream( self, continuation: Callable[[_ClientCallDetails, Any], Any], # Any is request type client_call_details: _ClientCallDetails, request: Any, # google.ads.googleads.vX.services.types.SearchGoogleAdsStreamRequest ) -> Any: # grpc.Call or grpc.Future """Intercepts and logs API interactions for Unary-Stream requests. Overrides abstract method defined in grpc.UnaryStreamClientInterceptor. Args: continuation: a function to continue the request process. client_call_details: a grpc._interceptor._ClientCallDetails instance containing request metadata. request: a SearchGoogleAdsRequest or SearchGoogleAdsStreamRequest message class instance. Returns: A grpc.Call/grpc.Future instance representing a service response. """ def on_rpc_complete(response_future: Any) -> None: # response_future is grpc.Future self.rpc_end = time.perf_counter() self.log_request(client_call_details, request, response_future) # Capture precise clock time to later calculate approximate elapsed # time of the RPC. self.rpc_start = time.perf_counter() # The below call is REQUIRED. response: Any = continuation(client_call_details, request) # response is grpc.Call or grpc.Future # Set self._cache to the cache on the response wrapper in order to # access the streaming logs. This is REQUIRED in order to log streaming # requests. self._cache = response.get_cache() response.add_done_callback(on_rpc_complete) # The below return is REQUIRED. return response