API Kualitas Data

• DataSource struktur

• DataQualityRulesetListDetails struktur

• DataQualityTargetTable struktur

• DataQualityRulesetEvaluationRunDescription struktur

• DataQualityRulesetEvaluationRunFilter struktur

• DataQualityEvaluationRunAdditionalRunOptions struktur

• DataQualityRuleRecommendationRunDescription struktur

• DataQualityRuleRecommendationRunFilter struktur

• DataQualityResult struktur

• DataQualityAnalyzerResult struktur

• DataQualityObservation struktur

• MetricBasedObservation struktur

• DataQualityMetricValues struktur

• DataQualityRuleResult struktur

• DataQualityResultDescription struktur

• DataQualityResultFilterCriteria struktur

• DataQualityRulesetFilterCriteria struktur

• DataQualityAggregatedMetrics struktur

• StatisticAnnotation struktur

• TimestampedInclusionAnnotation struktur

• AnnotationError struktur

• DatapointInclusionAnnotation struktur

• StatisticSummaryList daftar

• StatisticSummary struktur

• RunIdentifier struktur

• StatisticModelResult struktur

• DataQualityGlueTable struktur

Bidang

• GlueTable — Sebuah objek GlueTable.

  Sebuah AWS Glue meja.

• DataQualityGlueTable — Sebuah objek DataQualityGlueTable.

  AWS Glue Tabel untuk Operasi Kualitas Data.

Bidang

• Name— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama aturan kualitas data.

• Description — String deskripsi, dengan panjang tidak lebih dari 2048 byte, yang cocok dengan URI address multi-line string pattern.

  Deskripsi aturan kualitas data.

• CreatedOn — Stempel waktu.

  Tanggal dan waktu kumpulan aturan kualitas data dibuat.

• LastModifiedOn — Stempel waktu.

  Tanggal dan waktu aturan kualitas data terakhir diubah.

• TargetTable — Sebuah objek DataQualityTargetTable.

  Objek yang mewakili AWS Glue tabel.

• RecommendationRunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Ketika kumpulan aturan dibuat dari rekomendasi yang dijalankan, ID run ini dihasilkan untuk menghubungkan keduanya bersama-sama.

• RuleCount — Nomor (bilangan bulat).

  Jumlah aturan dalam aturan.

Bidang

• TableName- Wajib: UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 255 byte, cocok dengan. Single-line string pattern

  Nama AWS Glue meja.

• DatabaseName- Wajib: UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 255 byte, cocok dengan. Single-line string pattern

  Nama database tempat AWS Glue tabel ada.

• CatalogId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Id katalog tempat AWS Glue tabel ada.

Bidang

• RunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Pengidentifikasi eksekusi unik yang dikaitkan dengan eksekusi ini.

• Status— UTF-8 string (nilai valid: RUNNING FINISHED | FAILED | PENDING_EXECUTION | TIMED_OUT CANCELING | CANCELED |RECEIVED_BY_TASKRUNNER).

  Status untuk eksekusi ini.

• StartedOn — Stempel waktu.

  Tanggal dan waktu saat lari dimulai.

• DataSource — Sebuah objek DataSource.

  Sumber data ( AWS Glue tabel) yang terkait dengan proses.

Bidang

• DataSource — Wajib: Sebuah objek DataSource.

  Filter berdasarkan sumber data ( AWS Glue tabel) yang terkait dengan proses.

• StartedBefore — Stempel waktu.

  Filter hasil berdasarkan proses yang dimulai sebelum waktu ini.

• StartedAfter — Stempel waktu.

  Filter hasil berdasarkan proses yang dimulai setelah waktu ini.

• RulesetName— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Filter hasil dengan menjalankan yang terkait dengan nama kumpulan aturan tertentu.

Bidang

• CloudWatchMetricsEnabled – Boolean.

  Apakah akan mengaktifkan CloudWatch metrik atau tidak.

• ResultsS3Prefix— UTF-8 tali.

  Awalan untuk Amazon S3 untuk menyimpan hasil.

• CompositeRuleEvaluationMethod— UTF-8 string (nilai valid: COLUMN |ROW).

  Tetapkan metode evaluasi untuk aturan komposit dalam kumpulan aturan ke ROW/COLUMN

• CustomLogGroupPrefix— UTF-8 tali.

  Awalan kustom untuk nama grup CloudWatch log. Saat ditentukan, log proses evaluasi ditulis ke <CustomLogGroupPrefix>/error dan <CustomLogGroupPrefix>/output bukan grup default /aws-glue/data-quality/error dan /aws-glue/data-quality/output log. Nama grup log total, termasuk akhiran (/erroratau/output), tidak boleh melebihi 512 karakter.

Bidang

• RunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Pengidentifikasi eksekusi unik yang dikaitkan dengan eksekusi ini.

• Status— UTF-8 string (nilai valid: RUNNING FINISHED | FAILED | PENDING_EXECUTION | TIMED_OUT CANCELING | CANCELED |RECEIVED_BY_TASKRUNNER).

  Status untuk eksekusi ini.

• StartedOn — Stempel waktu.

  Tanggal dan waktu kapan proses ini dimulai.

• DataSource — Sebuah objek DataSource.

  Sumber data (AWS Glue tabel) yang terkait dengan rekomendasi dijalankan.

Bidang

• DataSource — Wajib: Sebuah objek DataSource.

  Filter berdasarkan sumber data tertentu (AWS Glue tabel).

• StartedBefore — Stempel waktu.

  Filter berdasarkan waktu untuk hasil dimulai sebelum waktu yang ditentukan.

• StartedAfter — Stempel waktu.

  Filter berdasarkan waktu untuk hasil dimulai setelah waktu yang ditentukan.

Bidang

• ResultId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID hasil unik untuk hasil kualitas data.

• ProfileId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID Profil untuk hasil kualitas data.

• Score — Nomor (ganda), tidak lebih dari 1.0.

  Skor kualitas data agregat. Merupakan rasio aturan yang diteruskan ke jumlah total aturan.

• DataSource — Sebuah objek DataSource.

  Tabel yang terkait dengan hasil kualitas data, jika ada.

• RulesetName— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama ruleset terkait dengan hasil kualitas data.

• EvaluationContext— UTF-8 tali.

  Dalam konteks pekerjaan di AWS Glue Studio, setiap node di kanvas biasanya diberi semacam nama dan node kualitas data akan memiliki nama. Dalam kasus beberapa node, evaluationContext dapat membedakan node.

• StartedOn — Stempel waktu.

  Tanggal dan waktu ketika kualitas data ini berjalan dimulai.

• CompletedOn — Stempel waktu.

  Tanggal dan waktu ketika kualitas data ini berjalan selesai.

• JobName— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama pekerjaan yang terkait dengan hasil kualitas data, jika ada.

• JobRunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID job run terkait dengan hasil kualitas data, jika ada.

• RulesetEvaluationRunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID run unik untuk evaluasi set aturan untuk hasil kualitas data ini.

• RuleResults— Sebuah array DataQualityRuleResult objek, tidak lebih dari 2000 struktur.

  Daftar DataQualityRuleResult objek yang mewakili hasil untuk setiap aturan.

• AnalyzerResults— Sebuah array DataQualityAnalyzerResult objek, tidak lebih dari 2000 struktur.

  Daftar DataQualityAnalyzerResult objek yang mewakili hasil untuk setiap analyzer.

• Observations — Susunan objek DataQualityObservation, tidak lebih dari 50 struktur.

  Daftar DataQualityObservation objek yang mewakili pengamatan yang dihasilkan setelah mengevaluasi aturan dan penganalisis.

• AggregatedMetrics — Sebuah objek DataQualityAggregatedMetrics.

  Ringkasan DataQualityAggregatedMetrics objek yang menunjukkan jumlah total baris dan aturan yang diproses, termasuk pass/fail statistiknya berdasarkan hasil tingkat baris.

Bidang

• Name— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama penganalisis kualitas data.

• Description— UTF-8 string, panjangnya tidak lebih dari 2048 byte, cocok dengan. URI address multi-line string pattern

  Deskripsi penganalisis kualitas data.

• EvaluationMessage— UTF-8 string, panjangnya tidak lebih dari 2048 byte, cocok dengan. URI address multi-line string pattern

  Pesan evaluasi.

• EvaluatedMetrics – Susunan peta pasangan nilai kunci.

  Setiap kunci adalah UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Setiap nilai adalah Angka (ganda).

  Peta metrik yang terkait dengan evaluasi penganalisis.

Bidang

• Description— UTF-8 string, panjangnya tidak lebih dari 2048 byte, cocok dengan. URI address multi-line string pattern

  Deskripsi pengamatan kualitas data.

• MetricBasedObservation — Sebuah objek MetricBasedObservation.

  Objek tipe yang MetricBasedObservation mewakili pengamatan yang didasarkan pada metrik kualitas data yang dievaluasi.

Bidang

• MetricName— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama metrik kualitas data yang digunakan untuk menghasilkan pengamatan.

• StatisticId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID Statistik.

• MetricValues — Sebuah objek DataQualityMetricValues.

  Objek tipe DataQualityMetricValues yang mewakili analisis nilai metrik kualitas data.

• NewRules— Sebuah array UTF-8 string.

  Daftar aturan kualitas data baru yang dihasilkan sebagai bagian dari pengamatan berdasarkan nilai metrik kualitas data.

Bidang

• ActualValue — Nomor (ganda).

  Nilai aktual dari metrik kualitas data.

• ExpectedValue — Nomor (ganda).

  Nilai yang diharapkan dari metrik kualitas data menurut analisis data historis.

• LowerLimit — Nomor (ganda).

  Batas bawah nilai metrik kualitas data menurut analisis data historis.

• UpperLimit — Nomor (ganda).

  Batas atas nilai metrik kualitas data menurut analisis data historis.

Bidang

• Name— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama aturan kualitas data.

• Description— UTF-8 string, panjangnya tidak lebih dari 2048 byte, cocok dengan. URI address multi-line string pattern

  Deskripsi aturan kualitas data.

• EvaluationMessage— UTF-8 string, panjangnya tidak lebih dari 2048 byte, cocok dengan. URI address multi-line string pattern

  Pesan evaluasi.

• Result— UTF-8 string (nilai valid: PASS | FAIL |ERROR).

  Status lulus atau gagal untuk aturan.

• EvaluatedMetrics – Susunan peta pasangan nilai kunci.

  Setiap kunci adalah UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Setiap nilai adalah Angka (ganda).

  Peta metrik yang terkait dengan evaluasi aturan.

• EvaluatedRule— UTF-8 string, panjangnya tidak lebih dari 2048 byte, cocok dengan. URI address multi-line string pattern

  Aturan yang dievaluasi.

• RuleMetrics – Susunan peta pasangan nilai kunci.

  Setiap kunci adalah UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Setiap nilai adalah Angka (ganda).

  Peta yang berisi metrik yang terkait dengan evaluasi aturan berdasarkan hasil tingkat baris.

Bidang

• ResultId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID hasil unik untuk hasil kualitas data ini.

• DataSource — Sebuah objek DataSource.

  Nama tabel yang terkait dengan hasil kualitas data.

• JobName— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama pekerjaan yang terkait dengan hasil kualitas data.

• JobRunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID job run terkait dengan hasil kualitas data.

• StartedOn — Stempel waktu.

  Waktu proses dimulai untuk hasil kualitas data ini.

Bidang

• DataSource — Sebuah objek DataSource.

  Filter hasil berdasarkan sumber data yang ditentukan. Misalnya, mengambil semua hasil untuk sebuah AWS Glue tabel.

• JobName— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Filter hasil dengan nama pekerjaan yang ditentukan.

• JobRunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Filter hasil berdasarkan ID job run yang ditentukan.

• StartedAfter — Stempel waktu.

  Filter hasil berdasarkan proses yang dimulai setelah waktu ini.

• StartedBefore — Stempel waktu.

  Filter hasil berdasarkan proses yang dimulai sebelum waktu ini.

Bidang

• Name— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama kriteria filter ruleset.

• Description — String deskripsi, dengan panjang tidak lebih dari 2048 byte, yang cocok dengan URI address multi-line string pattern.

  Deskripsi kriteria filter ruleset.

• CreatedBefore — Stempel waktu.

  Filter pada set aturan yang dibuat sebelum tanggal ini.

• CreatedAfter — Stempel waktu.

  Filter pada set aturan yang dibuat setelah tanggal ini.

• LastModifiedBefore — Stempel waktu.

  Filter pada aturan set terakhir diubah sebelum tanggal ini.

• LastModifiedAfter — Stempel waktu.

  Filter pada aturan set terakhir diubah setelah tanggal ini.

• TargetTable — Sebuah objek DataQualityTargetTable.

  Nama dan nama database dari tabel target.

Bidang

• TotalRowsProcessed — Nomor (ganda).

  Jumlah baris yang diproses selama evaluasi kualitas data.

• TotalRowsPassed — Nomor (ganda).

  Jumlah total baris yang melewati semua aturan kualitas data yang berlaku.

• TotalRowsFailed — Nomor (ganda).

  Jumlah total baris yang gagal satu atau beberapa aturan kualitas data.

• TotalRulesProcessed — Nomor (ganda).

  Jumlah total aturan kualitas data yang dievaluasi.

• TotalRulesPassed — Nomor (ganda).

  Jumlah total aturan kualitas data yang lulus kriteria evaluasi mereka.

• TotalRulesFailed — Nomor (ganda).

  Jumlah total aturan kualitas data yang gagal kriteria evaluasi mereka.

Bidang

• ProfileId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID Profil.

• StatisticId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID Statistik.

• StatisticRecordedOn — Stempel waktu.

  Stempel waktu ketika statistik beranotasi dicatat.

• InclusionAnnotation — Sebuah objek TimestampedInclusionAnnotation.

  Anotasi inklusi diterapkan pada statistik.

Bidang

• Value— UTF-8 string (nilai valid: INCLUDE |EXCLUDE).

  Nilai anotasi inklusi.

• LastModifiedOn — Stempel waktu.

  Stempel waktu saat anotasi inklusi terakhir diubah.

Bidang

• ProfileId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID Profil untuk anotasi yang gagal.

• StatisticId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID Statistik untuk anotasi yang gagal.

• FailureReason — String deskripsi, dengan panjang tidak lebih dari 2048 byte, yang cocok dengan URI address multi-line string pattern.

  Alasan mengapa anotasi gagal.

Bidang

• ProfileId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID profil kualitas data yang dimiliki statistik.

• StatisticId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID Statistik.

• InclusionAnnotation— UTF-8 string (nilai valid: INCLUDE |EXCLUDE).

  Nilai anotasi inklusi untuk diterapkan pada statistik.

Bidang

• StatisticId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID Statistik.

• ProfileId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID Profil.

• RunIdentifier — Sebuah objek RunIdentifier.

  Pengidentifikasi Jalankan

• StatisticName— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Custom string pattern #16

  Nama statistiknya.

• DoubleValue — Nomor (ganda).

  Nilai statistik.

• EvaluationLevel— UTF-8 string (nilai valid: Dataset="DATASET" | Column="COLUMN" |Multicolumn="MULTICOLUMN").

  Tingkat evaluasi statistik. Nilai yang mungkin:Dataset,Column,Multicolumn.

• ColumnsReferenced— Sebuah array UTF-8 string.

  Daftar kolom yang direferensikan oleh statistik.

• ReferencedDatasets— Sebuah array UTF-8 string.

  Daftar kumpulan data yang direferensikan oleh statistik.

• StatisticProperties – Susunan peta pasangan nilai kunci.

  Setiap kunci adalah UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Setiap nilai adalah string Deskripsi, panjangnya tidak lebih dari 2048 byte, cocok dengan. URI address multi-line string pattern

  AStatisticPropertiesMap, yang berisi a NameString dan DescriptionString

• RecordedOn — Stempel waktu.

  Stempel waktu ketika statistik dicatat.

• InclusionAnnotation — Sebuah objek TimestampedInclusionAnnotation.

  Anotasi inklusi untuk statistik.

Bidang

• RunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID Jalankan.

• JobRunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID Job Run.

Bidang

• LowerBound — Nomor (ganda).

  Batas bawah.

• UpperBound — Nomor (ganda).

  Batas atas.

• PredictedValue — Nomor (ganda).

  Nilai yang diprediksi.

• ActualValue — Nomor (ganda).

  Nilai sebenarnya.

• Date — Stempel waktu.

  Tanggalnya.

• InclusionAnnotation— UTF-8 string (nilai valid: INCLUDE |EXCLUDE).

  Anotasi inklusi.

Bidang

• DatabaseName- Wajib: UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 255 byte, cocok dengan. Single-line string pattern

  Nama database di AWS Glue Data Catalog.

• TableName- Wajib: UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 255 byte, cocok dengan. Single-line string pattern

  Nama tabel di AWS Glue Data Catalog.

• CatalogId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Pengidentifikasi unik untuk AWS Glue Data Catalog.

• ConnectionName— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama koneksi ke AWS Glue Data Catalog.

• AdditionalOptions— Sebuah array peta pasangan kunci-nilai, tidak kurang dari 1 atau lebih dari 10 pasang.

  Setiap kunci adalah UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Setiap nilai adalah string Deskripsi, panjangnya tidak lebih dari 2048 byte, cocok dengan. URI address multi-line string pattern

  Opsi tambahan untuk tabel. Saat ini ada dua kunci yang didukung:

  • pushDownPredicate: untuk memfilter pada partisi tanpa harus daftar dan membaca semua file dalam dataset Anda.

  • catalogPartitionPredicate: untuk menggunakan pemangkasan partisi sisi server menggunakan indeks partisi di. AWS Glue Data Catalog

• PreProcessingQuery— UTF-8 string, panjangnya tidak lebih dari 51200 byte, cocok dengan. URI address multi-line string pattern

  SQL Query dari format SparkSQL yang dapat digunakan untuk pra-proses data untuk tabel AWS Glue Data Catalog di, sebelum menjalankan Operasi Kualitas Data.

• StartDataQualityRulesetEvaluationRun tindakan (Python: start_data_quality_ruleset_evaluation_run)

• CancelDataQualityRulesetEvaluationRun tindakan (Python: cancel_data_quality_ruleset_evaluation_run)

• GetDataQualityRulesetEvaluationRun tindakan (Python: get_data_quality_ruleset_evaluation_run)

• ListDataQualityRulesetEvaluationRuns tindakan (Python: list_data_quality_ruleset_evaluation_runs)

• StartDataQualityRuleRecommendationRun tindakan (Python: start_data_quality_rule_recommendation_run)

• CancelDataQualityRuleRecommendationRun tindakan (Python: cancel_data_quality_rule_recommendation_run)

• GetDataQualityRuleRecommendationRun tindakan (Python: get_data_quality_rule_recommendation_run)

• ListDataQualityRuleRecommendationRuns tindakan (Python: list_data_quality_rule_recommendation_runs)

• GetDataQualityResult tindakan (Python: get_data_quality_result)

• BatchGetDataQualityResult tindakan (Python: batch_get_data_quality_result)

• ListDataQualityResults tindakan (Python: list_data_quality_results)

• CreateDataQualityRuleset tindakan (Python: create_data_quality_ruleset)

• DeleteDataQualityRuleset tindakan (Python: delete_data_quality_ruleset)

• GetDataQualityRuleset tindakan (Python: get_data_quality_ruleset)

• ListDataQualityRulesets tindakan (Python: list_data_quality_rulesets)

• UpdateDataQualityRuleset tindakan (Python: update_data_quality_ruleset)

• ListDataQualityStatistics tindakan (Python: list_data_quality_statistics)

• TimestampFilter struktur

• CreateDataQualityRulesetRequest struktur

• GetDataQualityRulesetResponse struktur

• GetDataQualityResultResponse struktur

• StartDataQualityRuleRecommendationRunRequest struktur

• GetDataQualityRuleRecommendationRunResponse struktur

• BatchPutDataQualityStatisticAnnotation tindakan (Python: batch_put_data_quality_statistic_annotation)

• GetDataQualityModel tindakan (Python: get_data_quality_model)

• GetDataQualityModelResult tindakan (Python: get_data_quality_model_result)

• ListDataQualityStatisticAnnotations tindakan (Python: list_data_quality_statistic_annotations)

• PutDataQualityProfileAnnotation tindakan (Python: put_data_quality_profile_annotation)

Permintaan

• DataSource — Wajib: Sebuah objek DataSource.

  Sumber data (AWS Glue tabel) yang terkait dengan proses ini.

• Role- Diperlukan: UTF-8 string.

  IAM Peran yang diberikan untuk mengenkripsi hasil proses.

• NumberOfWorkers — Nomor (bilangan bulat).

  Jumlah G.1X pekerja yang akan digunakan dalam pelarian. Default-nya adalah 5.

• Timeout — Nomor (bilangan bulat), minimal 1.

  Batas waktu untuk berlari dalam hitungan menit. Ini adalah waktu maksimum yang dijalankan dapat mengkonsumsi sumber daya sebelum dihentikan dan memasuki TIMEOUT status. Default-nya adalah 2.880 menit (48 jam).

• ClientToken— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Digunakan untuk idempotensi dan direkomendasikan untuk disetel ke ID acak (seperti UUID) untuk menghindari membuat atau memulai beberapa instance dari sumber daya yang sama.

• AdditionalRunOptions — Sebuah objek DataQualityEvaluationRunAdditionalRunOptions.

  Opsi run tambahan yang dapat Anda tentukan untuk menjalankan evaluasi.

• RulesetNames— Wajib: Sebuah array UTF-8 string, tidak kurang dari 1 atau lebih dari 10 string.

  Daftar nama ruleset.

• AdditionalDataSources – Susunan peta pasangan nilai kunci.

  Setiap kunci adalah UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Setiap nilai adalah sebuah objek DataSource A.

  Peta string referensi ke sumber data tambahan yang dapat Anda tentukan untuk menjalankan evaluasi.

Respons

• RunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Pengidentifikasi eksekusi unik yang dikaitkan dengan eksekusi ini.

Kesalahan

• InvalidInputException

• EntityNotFoundException

• OperationTimeoutException

• InternalServiceException

• ConflictException

Permintaan

• RunId- Wajib: UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 255 byte, cocok dengan. Single-line string pattern

  Pengidentifikasi eksekusi unik yang dikaitkan dengan eksekusi ini.

Respons

• Tidak ada parameter Respons.

Kesalahan

• EntityNotFoundException

• InvalidInputException

• OperationTimeoutException

• InternalServiceException

Permintaan

• RunId- Wajib: UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 255 byte, cocok dengan. Single-line string pattern

  Pengidentifikasi eksekusi unik yang dikaitkan dengan eksekusi ini.

Respons

• RunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Pengidentifikasi eksekusi unik yang dikaitkan dengan eksekusi ini.

• DataSource — Sebuah objek DataSource.

  Sumber data ( AWS Glue tabel) yang terkait dengan evaluasi ini dijalankan.

• Role— UTF-8 tali.

  IAM Peran yang diberikan untuk mengenkripsi hasil proses.

• NumberOfWorkers — Nomor (bilangan bulat).

  Jumlah G.1X pekerja yang akan digunakan dalam pelarian. Default-nya adalah 5.

• Timeout — Nomor (bilangan bulat), minimal 1.

  Batas waktu untuk berlari dalam hitungan menit. Ini adalah waktu maksimum yang dijalankan dapat mengkonsumsi sumber daya sebelum dihentikan dan memasuki TIMEOUT status. Default-nya adalah 2.880 menit (48 jam).

• AdditionalRunOptions — Sebuah objek DataQualityEvaluationRunAdditionalRunOptions.

  Opsi run tambahan yang dapat Anda tentukan untuk menjalankan evaluasi.

• Status— UTF-8 string (nilai valid: RUNNING FINISHED | FAILED | PENDING_EXECUTION | TIMED_OUT CANCELING | CANCELED |RECEIVED_BY_TASKRUNNER).

  Status untuk eksekusi ini.

• ErrorString— UTF-8 tali.

  String kesalahan yang terkait dengan proses.

• StartedOn — Stempel waktu.

  Tanggal dan waktu kapan proses ini dimulai.

• LastModifiedOn — Stempel waktu.

  Sebuah stempel waktu. Poin terakhir saat rekomendasi aturan kualitas data ini dijalankan telah dimodifikasi.

• CompletedOn — Stempel waktu.

  Tanggal dan waktu saat proses ini selesai.

• ExecutionTime — Nomor (bilangan bulat).

  Jumlah waktu (dalam detik) bahwa run mengkonsumsi sumber daya.

• RulesetNames— Sebuah array UTF-8 string, tidak kurang dari 1 atau lebih dari 10 string.

  Daftar nama ruleset untuk lari. Saat ini, parameter ini hanya mengambil satu nama Ruleset.

• ResultIds— Sebuah array UTF-8 string, tidak kurang dari 1 atau lebih dari 10 string.

  Daftar ID hasil untuk hasil kualitas data untuk dijalankan.

• AdditionalDataSources – Susunan peta pasangan nilai kunci.

  Setiap kunci adalah UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Setiap nilai adalah sebuah objek DataSource A.

  Peta string referensi ke sumber data tambahan yang dapat Anda tentukan untuk menjalankan evaluasi.

Kesalahan

• EntityNotFoundException

• InvalidInputException

• OperationTimeoutException

• InternalServiceException

Permintaan

• Filter — Sebuah objek DataQualityRulesetEvaluationRunFilter.

  Kriteria filter.

• NextToken— UTF-8 tali.

  Sebuah token pemberian nomor halaman untuk mengimbangi hasil.

• MaxResults — Nomor (bilangan bulat), tidak kurang dari 1 atau lebih dari 1000.

  Jumlah hasil maksimum yang akan dikembalikan.

Respons

• Runs – Susunan objek DataQualityRulesetEvaluationRunDescription.

  Sebuah daftar DataQualityRulesetEvaluationRunDescription objek yang mewakili kualitas data ruleset berjalan.

• NextToken— UTF-8 tali.

  Sebuah token pemberian nomor halaman, jika ada lebih banyak hasil yang tersedia.

Kesalahan

• InvalidInputException

• OperationTimeoutException

• InternalServiceException

Permintaan

Permintaan permintaan rekomendasi aturan Kualitas Data.

• DataSource — Wajib: Sebuah objek DataSource.

  Sumber data (AWS Glue tabel) yang terkait dengan proses ini.

• Role- Diperlukan: UTF-8 string.

  IAM Peran yang diberikan untuk mengenkripsi hasil proses.

• NumberOfWorkers — Nomor (bilangan bulat).

  Jumlah G.1X pekerja yang akan digunakan dalam pelarian. Default-nya adalah 5.

• Timeout — Nomor (bilangan bulat), minimal 1.

  Batas waktu untuk berlari dalam hitungan menit. Ini adalah waktu maksimum yang dijalankan dapat mengkonsumsi sumber daya sebelum dihentikan dan memasuki TIMEOUT status. Default-nya adalah 2.880 menit (48 jam).

• CreatedRulesetName— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Sebuah nama untuk ruleset.

• DataQualitySecurityConfiguration— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama konfigurasi keamanan yang dibuat dengan opsi enkripsi kualitas data.

• ClientToken— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Digunakan untuk idempotensi dan direkomendasikan untuk disetel ke ID acak (seperti UUID) untuk menghindari membuat atau memulai beberapa instance dari sumber daya yang sama.

Respons

• RunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Pengidentifikasi eksekusi unik yang dikaitkan dengan eksekusi ini.

Kesalahan

• InvalidInputException

• OperationTimeoutException

• InternalServiceException

• ConflictException

Permintaan

• RunId- Wajib: UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 255 byte, cocok dengan. Single-line string pattern

  Pengidentifikasi eksekusi unik yang dikaitkan dengan eksekusi ini.

Respons

• Tidak ada parameter Respons.

Kesalahan

• EntityNotFoundException

• InvalidInputException

• OperationTimeoutException

• InternalServiceException

Permintaan

• RunId- Wajib: UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 255 byte, cocok dengan. Single-line string pattern

  Pengidentifikasi eksekusi unik yang dikaitkan dengan eksekusi ini.

Respons

Respons untuk rekomendasi aturan Kualitas Data dijalankan.

• RunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Pengidentifikasi eksekusi unik yang dikaitkan dengan eksekusi ini.

• DataSource — Sebuah objek DataSource.

  Sumber data ( AWS Glue tabel) yang terkait dengan proses ini.

• Role— UTF-8 tali.

  IAM Peran yang diberikan untuk mengenkripsi hasil proses.

• NumberOfWorkers — Nomor (bilangan bulat).

  Jumlah G.1X pekerja yang akan digunakan dalam pelarian. Default-nya adalah 5.

• Timeout — Nomor (bilangan bulat), minimal 1.

  Batas waktu untuk berlari dalam hitungan menit. Ini adalah waktu maksimum yang dijalankan dapat mengkonsumsi sumber daya sebelum dihentikan dan memasuki TIMEOUT status. Default-nya adalah 2.880 menit (48 jam).

• Status— UTF-8 string (nilai valid: RUNNING FINISHED | FAILED | PENDING_EXECUTION | TIMED_OUT CANCELING | CANCELED |RECEIVED_BY_TASKRUNNER).

  Status untuk eksekusi ini.

• ErrorString— UTF-8 tali.

  String kesalahan yang terkait dengan proses.

• StartedOn — Stempel waktu.

  Tanggal dan waktu kapan proses ini dimulai.

• LastModifiedOn — Stempel waktu.

  Sebuah stempel waktu. Poin terakhir saat rekomendasi aturan kualitas data ini dijalankan telah dimodifikasi.

• CompletedOn — Stempel waktu.

  Tanggal dan waktu saat proses ini selesai.

• ExecutionTime — Nomor (bilangan bulat).

  Jumlah waktu (dalam detik) bahwa run mengkonsumsi sumber daya.

• RecommendedRuleset— UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 65536 byte.

  Ketika proses rekomendasi aturan mulai selesai, itu membuat kumpulan aturan yang direkomendasikan (seperangkat aturan). Anggota ini memiliki aturan tersebut dalam format Data Quality Definition Language (DQDL).

• CreatedRulesetName— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama ruleset yang dibuat oleh run.

• DataQualitySecurityConfiguration— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama konfigurasi keamanan yang dibuat dengan opsi enkripsi kualitas data.

Kesalahan

• EntityNotFoundException

• InvalidInputException

• OperationTimeoutException

• InternalServiceException

Permintaan

• Filter — Sebuah objek DataQualityRuleRecommendationRunFilter.

  Kriteria filter.

• NextToken— UTF-8 tali.

  Sebuah token pemberian nomor halaman untuk mengimbangi hasil.

• MaxResults — Nomor (bilangan bulat), tidak kurang dari 1 atau lebih dari 1000.

  Jumlah hasil maksimum yang akan dikembalikan.

Respons

• Runs – Susunan objek DataQualityRuleRecommendationRunDescription.

  Daftar objek DataQualityRuleRecommendationRunDescription.

• NextToken— UTF-8 tali.

  Sebuah token pemberian nomor halaman, jika ada lebih banyak hasil yang tersedia.

Kesalahan

• InvalidInputException

• OperationTimeoutException

• InternalServiceException

Permintaan

• ResultId- Wajib: UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 255 byte, cocok dengan. Single-line string pattern

  ID hasil unik untuk hasil kualitas data.

Respons

Respon untuk hasil kualitas data.

• ResultId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID hasil unik untuk hasil kualitas data.

• ProfileId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID Profil untuk hasil kualitas data.

• Score — Nomor (ganda), tidak lebih dari 1.0.

  Skor kualitas data agregat. Merupakan rasio aturan yang diteruskan ke jumlah total aturan.

• DataSource — Sebuah objek DataSource.

  Tabel yang terkait dengan hasil kualitas data, jika ada.

• RulesetName— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama ruleset terkait dengan hasil kualitas data.

• EvaluationContext— UTF-8 tali.

  Dalam konteks pekerjaan di AWS Glue Studio, setiap node di kanvas biasanya diberi semacam nama dan node kualitas data akan memiliki nama. Dalam kasus beberapa node, evaluationContext dapat membedakan node.

• StartedOn — Stempel waktu.

  Tanggal dan waktu ketika proses untuk hasil kualitas data ini dimulai.

• CompletedOn — Stempel waktu.

  Tanggal dan waktu ketika proses untuk hasil kualitas data ini selesai.

• JobName— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama pekerjaan yang terkait dengan hasil kualitas data, jika ada.

• JobRunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID job run terkait dengan hasil kualitas data, jika ada.

• RulesetEvaluationRunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID run unik yang terkait dengan evaluasi ruleset.

• RuleResults— Sebuah array DataQualityRuleResult objek, tidak lebih dari 2000 struktur.

  Daftar DataQualityRuleResult objek yang mewakili hasil untuk setiap aturan.

• AnalyzerResults— Sebuah array DataQualityAnalyzerResult objek, tidak lebih dari 2000 struktur.

  Daftar DataQualityAnalyzerResult objek yang mewakili hasil untuk setiap analyzer.

• Observations — Susunan objek DataQualityObservation, tidak lebih dari 50 struktur.

  Daftar DataQualityObservation objek yang mewakili pengamatan yang dihasilkan setelah mengevaluasi aturan dan penganalisis.

• AggregatedMetrics — Sebuah objek DataQualityAggregatedMetrics.

  Ringkasan DataQualityAggregatedMetrics objek yang menunjukkan jumlah total baris dan aturan yang diproses, termasuk pass/fail statistiknya berdasarkan hasil tingkat baris.

Kesalahan

• InvalidInputException

• OperationTimeoutException

• InternalServiceException

• EntityNotFoundException

Permintaan

• ResultIds— Wajib: Sebuah array UTF-8 string, tidak kurang dari 1 atau lebih dari 100 string.

  Daftar ID hasil unik untuk hasil kualitas data.

Respons

• Results – Wajib: Susunan objek DataQualityResult.

  Daftar DataQualityResult objek yang mewakili hasil kualitas data.

• ResultsNotFound— Sebuah array UTF-8 string, tidak kurang dari 1 atau lebih dari 100 string.

  Daftar ID hasil yang hasilnya tidak ditemukan.

Kesalahan

• InvalidInputException

• OperationTimeoutException

• InternalServiceException

Permintaan

• Filter — Sebuah objek DataQualityResultFilterCriteria.

  Kriteria filter.

• NextToken— UTF-8 tali.

  Sebuah token pemberian nomor halaman untuk mengimbangi hasil.

• MaxResults — Nomor (bilangan bulat), tidak kurang dari 1 atau lebih dari 1000.

  Jumlah hasil maksimum yang akan dikembalikan.

Respons

• Results – Wajib: Susunan objek DataQualityResultDescription.

  Daftar objek DataQualityResultDescription.

• NextToken— UTF-8 tali.

  Sebuah token pemberian nomor halaman, jika ada lebih banyak hasil yang tersedia.

Kesalahan

• InvalidInputException

• OperationTimeoutException

• InternalServiceException

Permintaan

Permintaan untuk membuat kumpulan aturan kualitas data.

• Name- Wajib: UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 255 byte, cocok dengan. Single-line string pattern

  Nama unik untuk kumpulan aturan kualitas data.

• Description — String deskripsi, dengan panjang tidak lebih dari 2048 byte, yang cocok dengan URI address multi-line string pattern.

  Deskripsi aturan kualitas data.

• Ruleset- Wajib: UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 65536 byte.

  Aturan Bahasa Definisi Kualitas Data (DQDL). Untuk informasi selengkapnya, lihat panduan AWS Glue pengembang.

• Tags — Sebuah rangkaian peta pasangan nilai kunci, tidak lebih dari 50 pasang.

  Setiap kunci adalah UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 128 byte.

  Setiap nilai adalah UTF-8 string, panjangnya tidak lebih dari 256 byte.

  Daftar tag yang diterapkan pada kumpulan aturan kualitas data.

• TargetTable — Sebuah objek DataQualityTargetTable.

  Tabel target yang terkait dengan kumpulan aturan kualitas data.

• RecommendationRunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID run unik untuk menjalankan rekomendasi.

• DataQualitySecurityConfiguration— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama konfigurasi keamanan yang dibuat dengan opsi enkripsi kualitas data.

• ClientToken— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Digunakan untuk idempotensi dan direkomendasikan untuk disetel ke ID acak (seperti UUID) untuk menghindari membuat atau memulai beberapa instance dari sumber daya yang sama.

Respons

• Name— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama unik untuk kumpulan aturan kualitas data.

Kesalahan

• InvalidInputException

• AlreadyExistsException

• OperationTimeoutException

• InternalServiceException

• ResourceNumberLimitExceededException

Permintaan

• Name- Wajib: UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 255 byte, cocok dengan. Single-line string pattern

  Nama untuk kumpulan aturan kualitas data.

Respons

• Tidak ada parameter Respons.

Kesalahan

• EntityNotFoundException

• InvalidInputException

• OperationTimeoutException

• InternalServiceException

Permintaan

• Name- Wajib: UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 255 byte, cocok dengan. Single-line string pattern

  Nama ruleset.

Respons

Mengembalikan respon ruleset kualitas data.

• Name— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama ruleset.

• Description — String deskripsi, dengan panjang tidak lebih dari 2048 byte, yang cocok dengan URI address multi-line string pattern.

  Deskripsi dari ruleset.

• Ruleset— UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 65536 byte.

  Aturan Bahasa Definisi Kualitas Data (DQDL). Untuk informasi selengkapnya, lihat panduan AWS Glue pengembang.

• TargetTable — Sebuah objek DataQualityTargetTable.

  Nama dan nama database dari tabel target.

• CreatedOn — Stempel waktu.

  Sebuah stempel waktu. Waktu dan tanggal pembuatan aturan kualitas data ini.

• LastModifiedOn — Stempel waktu.

  Sebuah stempel waktu. Poin terakhir dalam waktu ketika aturan kualitas data ini dimodifikasi.

• RecommendationRunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Ketika kumpulan aturan dibuat dari rekomendasi yang dijalankan, ID run ini dihasilkan untuk menghubungkan keduanya bersama-sama.

• DataQualitySecurityConfiguration— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama konfigurasi keamanan yang dibuat dengan opsi enkripsi kualitas data.

Kesalahan

• EntityNotFoundException

• InvalidInputException

• OperationTimeoutException

• InternalServiceException

Permintaan

• NextToken— UTF-8 tali.

  Sebuah token pemberian nomor halaman untuk mengimbangi hasil.

• MaxResults — Nomor (bilangan bulat), tidak kurang dari 1 atau lebih dari 1000.

  Jumlah hasil maksimum yang akan dikembalikan.

• Filter — Sebuah objek DataQualityRulesetFilterCriteria.

  Kriteria filter.

• Tags — Sebuah rangkaian peta pasangan nilai kunci, tidak lebih dari 50 pasang.

  Setiap kunci adalah UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 128 byte.

  Setiap nilai adalah UTF-8 string, panjangnya tidak lebih dari 256 byte.

  Daftar tag pasangan kunci-nilai.

Respons

• Rulesets – Susunan objek DataQualityRulesetListDetails.

  Daftar aturan paginasi untuk daftar tabel yang ditentukan. AWS Glue

• NextToken— UTF-8 tali.

  Sebuah token pemberian nomor halaman, jika ada lebih banyak hasil yang tersedia.

Kesalahan

• EntityNotFoundException

• InvalidInputException

• OperationTimeoutException

• InternalServiceException

Permintaan

• Name- Wajib: UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 255 byte, cocok dengan. Single-line string pattern

  Nama aturan kualitas data.

• Description — String deskripsi, dengan panjang tidak lebih dari 2048 byte, yang cocok dengan URI address multi-line string pattern.

  Deskripsi dari ruleset.

• Ruleset— UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 65536 byte.

  Aturan Bahasa Definisi Kualitas Data (DQDL). Untuk informasi selengkapnya, lihat panduan AWS Glue pengembang.

Respons

• Name— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama aturan kualitas data.

• Description — String deskripsi, dengan panjang tidak lebih dari 2048 byte, yang cocok dengan URI address multi-line string pattern.

  Deskripsi dari ruleset.

• Ruleset— UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 65536 byte.

  Aturan Bahasa Definisi Kualitas Data (DQDL). Untuk informasi selengkapnya, lihat panduan AWS Glue pengembang.

Kesalahan

• EntityNotFoundException

• AlreadyExistsException

• IdempotentParameterMismatchException

• InvalidInputException

• OperationTimeoutException

• InternalServiceException

• ResourceNumberLimitExceededException

Permintaan

• StatisticId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID Statistik.

• ProfileId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID Profil.

• TimestampFilter — Sebuah objek TimestampFilter.

  Filter stempel waktu.

• MaxResults — Nomor (bilangan bulat), tidak kurang dari 1 atau lebih dari 1000.

  Jumlah maksimum hasil untuk dikembalikan dalam permintaan ini.

• NextToken— UTF-8 tali.

  Token pagination untuk meminta halaman hasil berikutnya.

Respons

• Statistics – Susunan objek StatisticSummary.

  AStatisticSummaryList.

• NextToken— UTF-8 tali.

  Token pagination untuk meminta halaman hasil berikutnya.

Kesalahan

• EntityNotFoundException

• InvalidInputException

• InternalServiceException

Bidang

• RecordedBefore — Stempel waktu.

  Stempel waktu sebelum statistik harus dimasukkan dalam hasil.

• RecordedAfter — Stempel waktu.

  Stempel waktu setelah statistik harus dimasukkan dalam hasil.

Bidang

• Name- Wajib: UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 255 byte, cocok dengan. Single-line string pattern

  Nama unik untuk kumpulan aturan kualitas data.

• Description — String deskripsi, dengan panjang tidak lebih dari 2048 byte, yang cocok dengan URI address multi-line string pattern.

  Deskripsi aturan kualitas data.

• Ruleset- Wajib: UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 65536 byte.

  Aturan Bahasa Definisi Kualitas Data (DQDL). Untuk informasi selengkapnya, lihat panduan AWS Glue pengembang.

• Tags — Sebuah rangkaian peta pasangan nilai kunci, tidak lebih dari 50 pasang.

  Setiap kunci adalah UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 128 byte.

  Setiap nilai adalah UTF-8 string, panjangnya tidak lebih dari 256 byte.

  Daftar tag yang diterapkan pada kumpulan aturan kualitas data.

• TargetTable — Sebuah objek DataQualityTargetTable.

  Tabel target yang terkait dengan kumpulan aturan kualitas data.

• RecommendationRunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID run unik untuk menjalankan rekomendasi.

• DataQualitySecurityConfiguration— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama konfigurasi keamanan yang dibuat dengan opsi enkripsi kualitas data.

• ClientToken— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Digunakan untuk idempotensi dan direkomendasikan untuk disetel ke ID acak (seperti UUID) untuk menghindari membuat atau memulai beberapa instance dari sumber daya yang sama.

Bidang

• Name— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama ruleset.

• Description — String deskripsi, dengan panjang tidak lebih dari 2048 byte, yang cocok dengan URI address multi-line string pattern.

  Deskripsi dari ruleset.

• Ruleset— UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 65536 byte.

  Aturan Bahasa Definisi Kualitas Data (DQDL). Untuk informasi selengkapnya, lihat panduan AWS Glue pengembang.

• TargetTable — Sebuah objek DataQualityTargetTable.

  Nama dan nama database dari tabel target.

• CreatedOn — Stempel waktu.

  Sebuah stempel waktu. Waktu dan tanggal pembuatan aturan kualitas data ini.

• LastModifiedOn — Stempel waktu.

  Sebuah stempel waktu. Poin terakhir dalam waktu ketika aturan kualitas data ini dimodifikasi.

• RecommendationRunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Ketika kumpulan aturan dibuat dari rekomendasi yang dijalankan, ID run ini dihasilkan untuk menghubungkan keduanya bersama-sama.

• DataQualitySecurityConfiguration— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama konfigurasi keamanan yang dibuat dengan opsi enkripsi kualitas data.

Bidang

• ResultId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID hasil unik untuk hasil kualitas data.

• ProfileId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID Profil untuk hasil kualitas data.

• Score — Nomor (ganda), tidak lebih dari 1.0.

  Skor kualitas data agregat. Merupakan rasio aturan yang diteruskan ke jumlah total aturan.

• DataSource — Sebuah objek DataSource.

  Tabel yang terkait dengan hasil kualitas data, jika ada.

• RulesetName— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama ruleset terkait dengan hasil kualitas data.

• EvaluationContext— UTF-8 tali.

  Dalam konteks pekerjaan di AWS Glue Studio, setiap node di kanvas biasanya diberi semacam nama dan node kualitas data akan memiliki nama. Dalam kasus beberapa node, evaluationContext dapat membedakan node.

• StartedOn — Stempel waktu.

  Tanggal dan waktu ketika proses untuk hasil kualitas data ini dimulai.

• CompletedOn — Stempel waktu.

  Tanggal dan waktu ketika proses untuk hasil kualitas data ini selesai.

• JobName— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama pekerjaan yang terkait dengan hasil kualitas data, jika ada.

• JobRunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID job run terkait dengan hasil kualitas data, jika ada.

• RulesetEvaluationRunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID run unik yang terkait dengan evaluasi ruleset.

• RuleResults— Sebuah array DataQualityRuleResult objek, tidak lebih dari 2000 struktur.

  Daftar DataQualityRuleResult objek yang mewakili hasil untuk setiap aturan.

• AnalyzerResults— Sebuah array DataQualityAnalyzerResult objek, tidak lebih dari 2000 struktur.

  Daftar DataQualityAnalyzerResult objek yang mewakili hasil untuk setiap analyzer.

• Observations — Susunan objek DataQualityObservation, tidak lebih dari 50 struktur.

  Daftar DataQualityObservation objek yang mewakili pengamatan yang dihasilkan setelah mengevaluasi aturan dan penganalisis.

• AggregatedMetrics — Sebuah objek DataQualityAggregatedMetrics.

  Ringkasan DataQualityAggregatedMetrics objek yang menunjukkan jumlah total baris dan aturan yang diproses, termasuk pass/fail statistiknya berdasarkan hasil tingkat baris.

Bidang

• DataSource — Wajib: Sebuah objek DataSource.

  Sumber data (AWS Glue tabel) yang terkait dengan proses ini.

• Role- Diperlukan: UTF-8 string.

  IAM Peran yang diberikan untuk mengenkripsi hasil proses.

• NumberOfWorkers — Nomor (bilangan bulat).

  Jumlah G.1X pekerja yang akan digunakan dalam pelarian. Default-nya adalah 5.

• Timeout — Nomor (bilangan bulat), minimal 1.

  Batas waktu untuk berlari dalam hitungan menit. Ini adalah waktu maksimum yang dijalankan dapat mengkonsumsi sumber daya sebelum dihentikan dan memasuki TIMEOUT status. Default-nya adalah 2.880 menit (48 jam).

• CreatedRulesetName— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Sebuah nama untuk ruleset.

• DataQualitySecurityConfiguration— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama konfigurasi keamanan yang dibuat dengan opsi enkripsi kualitas data.

• ClientToken— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Digunakan untuk idempotensi dan direkomendasikan untuk disetel ke ID acak (seperti UUID) untuk menghindari membuat atau memulai beberapa instance dari sumber daya yang sama.

Bidang

• RunId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Pengidentifikasi eksekusi unik yang dikaitkan dengan eksekusi ini.

• DataSource — Sebuah objek DataSource.

  Sumber data ( AWS Glue tabel) yang terkait dengan proses ini.

• Role— UTF-8 tali.

  IAM Peran yang diberikan untuk mengenkripsi hasil proses.

• NumberOfWorkers — Nomor (bilangan bulat).

  Jumlah G.1X pekerja yang akan digunakan dalam pelarian. Default-nya adalah 5.

• Timeout — Nomor (bilangan bulat), minimal 1.

  Batas waktu untuk berlari dalam hitungan menit. Ini adalah waktu maksimum yang dijalankan dapat mengkonsumsi sumber daya sebelum dihentikan dan memasuki TIMEOUT status. Default-nya adalah 2.880 menit (48 jam).

• Status— UTF-8 string (nilai valid: RUNNING FINISHED | FAILED | PENDING_EXECUTION | TIMED_OUT CANCELING | CANCELED |RECEIVED_BY_TASKRUNNER).

  Status untuk eksekusi ini.

• ErrorString— UTF-8 tali.

  String kesalahan yang terkait dengan proses.

• StartedOn — Stempel waktu.

  Tanggal dan waktu kapan proses ini dimulai.

• LastModifiedOn — Stempel waktu.

  Sebuah stempel waktu. Poin terakhir saat rekomendasi aturan kualitas data ini dijalankan telah dimodifikasi.

• CompletedOn — Stempel waktu.

  Tanggal dan waktu saat proses ini selesai.

• ExecutionTime — Nomor (bilangan bulat).

  Jumlah waktu (dalam detik) bahwa run mengkonsumsi sumber daya.

• RecommendedRuleset— UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 65536 byte.

  Ketika proses rekomendasi aturan mulai selesai, itu membuat kumpulan aturan yang direkomendasikan (seperangkat aturan). Anggota ini memiliki aturan tersebut dalam format Data Quality Definition Language (DQDL).

• CreatedRulesetName— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama ruleset yang dibuat oleh run.

• DataQualitySecurityConfiguration— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Nama konfigurasi keamanan yang dibuat dengan opsi enkripsi kualitas data.

Permintaan

• InclusionAnnotations – Wajib: Susunan objek DatapointInclusionAnnotation.

  Sebuah daftar dari DatapointInclusionAnnotation's. InclusionAnnotationsHarus berisi ProfileId dan Statisticid. Jika ada beberapa InclusionAnnotations, daftar harus merujuk ke StatistiCID tunggal di beberapa profileID.

• ClientToken— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Token Klien.

Respons

• FailedInclusionAnnotations – Susunan objek AnnotationError.

  Sebuah daftar dari AnnotationError's.

Kesalahan

• EntityNotFoundException

• InvalidInputException

• InternalServiceException

• ResourceNumberLimitExceededException

Permintaan

• StatisticId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID Statistik.

• ProfileId- Wajib: UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 255 byte, cocok dengan. Single-line string pattern

  ID Profil.

Respons

• Status— UTF-8 string (nilai valid: RUNNING | SUCCEEDED |FAILED).

  Status pelatihan model kualitas data.

• StartedOn — Stempel waktu.

  Stempel waktu saat pelatihan model kualitas data dimulai.

• CompletedOn — Stempel waktu.

  Stempel waktu saat pelatihan model kualitas data selesai.

• FailureReason— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  Alasan kegagalan pelatihan.

Kesalahan

• EntityNotFoundException

• InvalidInputException

• OperationTimeoutException

• InternalServiceException

Permintaan

• StatisticId- Wajib: UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 255 byte, cocok dengan. Single-line string pattern

  ID Statistik.

• ProfileId- Wajib: UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 255 byte, cocok dengan. Single-line string pattern

  ID Profil.

Respons

• CompletedOn — Stempel waktu.

  Stempel waktu saat pelatihan model kualitas data selesai.

• Model – Susunan objek StatisticModelResult.

  Sebuah daftar StatisticModelResult

Kesalahan

• EntityNotFoundException

• InvalidInputException

• OperationTimeoutException

• InternalServiceException

Permintaan

• StatisticId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID Statistik.

• ProfileId— UTF-8 string, tidak kurang dari 1 atau lebih dari 255 byte panjang, cocok dengan. Single-line string pattern

  ID Profil.

• TimestampFilter — Sebuah objek TimestampFilter.

  Filter stempel waktu.

• MaxResults — Nomor (bilangan bulat), tidak kurang dari 1 atau lebih dari 1000.

  Jumlah maksimum hasil untuk dikembalikan dalam permintaan ini.

• NextToken— UTF-8 tali.

  Token pagination untuk mengambil set hasil berikutnya.

Respons

• Annotations – Susunan objek StatisticAnnotation.

  Daftar yang StatisticAnnotation diterapkan pada Statistik

• NextToken— UTF-8 tali.

  Token pagination untuk mengambil set hasil berikutnya.

Kesalahan

• InvalidInputException

• InternalServiceException

Permintaan

• ProfileId- Wajib: UTF-8 string, panjangnya tidak kurang dari 1 atau lebih dari 255 byte, cocok dengan. Single-line string pattern

  ID profil pemantauan kualitas data untuk membuat anotasi.

• InclusionAnnotation- Diperlukan: UTF-8 string (nilai valid: INCLUDE |EXCLUDE).

  Nilai anotasi inklusi untuk diterapkan ke profil.

Respons

• Tidak ada parameter Respons.

Kesalahan

• EntityNotFoundException

• InvalidInputException

• InternalServiceException