View a markdown version of this page

Verarbeitung von Datenexporten - AWS Data Exports
Konfiguration von Amazon AthenaKonfiguration von Amazon RedshiftEmpfohlene SQL-Abfragen für die Verarbeitung von CUR 2.0Empfohlene SQL-Abfragen für die Verarbeitung von Datenexporten zu CO2-Emissionen

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Verarbeitung von Datenexporten

In den folgenden Abschnitten finden Sie Informationen zur Verarbeitung Ihrer Datenexporte.

Konfiguration von Amazon Athena

Um eine Tabelle und Partitionen für Athena mit einem zu erstellen AWS Crawler

  1. Erstellen Sie einen Export von CUR 2.0 oder CO2-Emissionen mit den folgenden Lieferoptionen für den Datenexport:

    • Komprimierungstyp und Dateiformat: Parquet - Parquet

    • Dateiversionierung: Überschreibt die bestehende Datenexportdatei

  2. Verwenden Sie in Athena den Notebook-Editor mit Trino SQL und wählen Sie Create, um eine Tabelle mit "AWS Glue Crawler" zu erstellen. Richten Sie den Glue-Crawler mithilfe des Glue-Crawler-Workflows so aus, dass er im <bucket-name><prefix><export-name>Ordner s3://////data ausgeführt wird, um automatisch alle bereitgestellten Partitionen für den angegebenen Export nach Athena zu laden.

  3. Nachdem der Glue-Crawler abgeschlossen ist, können Sie Athena verwenden, um Abfragen in die vom Glue-Crawler erstellte Tabelle zu schreiben.

Konfiguration von Amazon Redshift

Amazon Redshift ist ein Cloud-Data Warehouse, auf das entweder mit einer bereitgestellten Kapazität oder mit einem serverlosen Modell zugegriffen werden kann. Amazon Redshift bietet eine schnelle Abfrageleistung für die Verarbeitung Ihrer Daten aus Datenexporten.

Informationen zur Einrichtung von Redshift finden Sie im Amazon Redshift Getting Started Guide.

Nachdem Sie Ihre CUR 2.0-Exportdaten in ein Datenanalysetool wie Amazon Athena oder Amazon Redshift geladen haben, können Sie sie verarbeiten, um Erkenntnisse über Kosten und Nutzung zu gewinnen. AWS Well-Architected Labs bietet eine CUR-Abfragebibliothek, mit der Sie CUR verarbeiten können. Weitere Informationen finden Sie unter AWS CUR-Abfragebibliothek.

Beachten Sie die folgenden zwei Informationen zu SQL-Abfragen:

  • Die Well-Architected Labs-SQL-Abfragen funktionieren im Datenexport-Abfragefeld nicht, da Data Exports Aggregationen und einige der anderen in diesen Abfragen verwendeten SQL-Syntaxen nicht unterstützt.

  • Die Well-Architected Labs-SQL-Abfragen funktionieren nur, wenn Sie Ihre Spalten nicht anhand der Standardnamen umbenannt haben. Je nach Abfrage müssen Sie möglicherweise einige Produktspalten als separate Spalten mit dem Punktoperator abfragen. Weitere Informationen finden Sie unter Datenabfrage — SQL-Abfrage- und Tabellenkonfigurationen.

Empfohlene SQL-Abfragen für die Verarbeitung von Datenexporten zu CO2-Emissionen

Um die gesamten CO2-Emissionen pro payer_account_id abzurufen:

SELECT payer_account_id, SUM(total_mbm_emissions_value) AS total_emissions
FROM "ccft-data-exports"."ccft-data-exports-data" -- change to your table name
GROUP BY payer_account_id
ORDER BY total_emissions DESC;

Um die gesamten CO2-Emissionen pro payer_account_id und pro product_code zu ermitteln:

SELECT payer_account_id, product_code, SUM(total_mbm_emissions_value) AS total_emissions
FROM "ccft-data-exports"."ccft-data-exports-data"-- change to your table name
GROUP BY payer_account_id, product_code
ORDER BY total_emissions DESC;

Um die gesamten CO2-Emissionen pro payer_account_id und pro region_code zu ermitteln:

SELECT payer_account_id, region_code, SUM(total_mbm_emissions_value) AS total_emissions
FROM "ccft-data-exports"."ccft-data-exports-data" -- change to your table name
GROUP BY payer_account_id, region_code
ORDER BY total_emissions DESC;