

翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。

# Amazon Redshift Spectrum を使用する際のベストプラクティス
<a name="best-practices-redshift-spectrum"></a>

このセクションでは、[Amazon Redshift Spectrum](https://docs.aws.amazon.com/redshift/latest/dg/c-using-spectrum.html) を使用するためのベストプラクティスの概要について説明します。Redshift Spectrum を使用する際に最適なパフォーマンスを実現するには、以下のベストプラクティスに従うことをお勧めします。
+ ファイルタイプが Redshift Spectrum クエリのパフォーマンスに重大な影響を与えることを考慮してください。パフォーマンスを向上させるには、ORC や Parquet などの列エンコードされたファイルを使用し、CSV 形式はごく小さなディメンションテーブルにのみ使用します。
+ プレフィックスベースのパーティショニングを使用して、パーティションプルーニングを活用します。つまり、データレイク内のパーティションにキー指定されたフィルターを使用します。
+ Redshift Spectrum は大規模なリクエストを処理するために自動的にスケールされるため、Redshift Spectrum ではできるだけ多くの処理を行います (述語のプッシュダウンなど)。
+ 頻繁にフィルタリングされる列のパーティションファイルには注意してください。データが 1 つ以上のフィルタリングされた列によってパーティション分割されている場合、Redshift Spectrum はパーティションプルーニングを活用し、不要なパーティションやファイルのスキャンをスキップできます。一般的な方法では、時間に基づいてデータをパーティション化します。
+ 次のクエリを使用して、パーティションの有効性と Redshift Spectrum クエリの効率性を確認できます。

  ```
  Select query,
             segment,
             max(assigned_partitions) as total_partitions,
             max(qualified_partitions) as qualified_partitions
  From svl_s3partition
  Where query=pg_last_query_id()
  Group by 1,2;
  ```

  前述のクエリは以下を示しています。
  + **total\$1partitions** – によって認識されるパーティションの数 AWS Glue Data Catalog
  + **qualified\$1partitions** – Redshift Spectrum クエリでアクセスされる Amazon Simple Storage Service (Amazon S3) のプレフィックスの数
+ また、`SVL_S3QUERY_SUMMARY` システムテーブルをチェックして、パーティションの有効性と Redshift Spectrum クエリの効率性を確認することもできます。これを行うには、以下のステートメントを実行します。

  ```
  Select *
  From svl_s3query_summary
  Where query=pg_last_query_id();
  ```

  前述のクエリは、パーティションプルーニングの効率性を示すファイルに加えて、`is_partitioned`、`s3_scanned_rows/bytes`、および `s3_returned_rows/bytes` の値を含むさらに多くの情報を返します。

## Redshift Spectrum での述語プッシュダウン
<a name="predicate-pushdown"></a>

述語プッシュダウンを使用すると、Amazon Redshift クラスターでのリソースの消費を回避できます。多くの SQL オペレーションを Redshift Spectrum レイヤーにプッシュダウンできます。これを可能な限り活用することをお勧めします。

以下に留意してください。
+ Redshift Spectrum レイヤー内では、次のようないくつかのタイプの SQL オペレーションを完全に評価できます。
  + `GROUP BY` 句
  + 比較条件とパターンマッチング条件 (例: `LIKE`)
  + 集計関数 (例: `COUNT`、`SUM`、`AVG`、`MIN`、`MAX`)
  + `regex_replace`、`to_upper`、`date_trunc`、およびその他の関数
+ `DISTINCT` や `ORDER BY` を含む一部のオペレーションを Redshift Spectrum レイヤーにプッシュすることはできません。ソートはリーダーノードで実行されるため、可能であればクエリの最上位レベルでのみ `ORDER BY` を実行してください。
+ `EXPLAIN` クエリプランを調べて、述語プッシュダウンが有効かどうかを確認します。`EXPLAIN` コマンドで Redshift Spectrum 部分を検索するには、以下のステップを参照してください。
  + S3 Seq Scan
  + S3 HashAggregate
  + S3 Query Scan
  + Seq Scan PartitionInfo
  + Partition Loop
+ クエリで使用する列数を最小限にします。Redshift Spectrum では、データが Parquet 形式または ORC 形式の場合、スキャンする列を減らすことができます。
+ 並列処理とパーティション排除のためにパーティションをフル活用し、可能であればファイルサイズを 64 MB 以上に維持します。
+ `CREATE EXTERNAL TABLE` または `ALTER TABLE` を使用する場合は、`TABLE PROPERTIES` `'numRows'='nnn'` を設定します。Amazon Redshift は、外部テーブルを分析して、クエリオプティマイザがクエリプランを生成するために使用するテーブル統計を生成することはありません。統計情報が設定されていない場合、Amazon Redshift は、外部テーブルの方が大きくローカルテーブルの方が小さいということを前提にします。

## Redshift Spectrum のクエリ調整のヒント
<a name="query-tuning-spectrum"></a>

クエリを調整するときは、次の点に注意することをお勧めします。
+ Amazon Redshift クラスターがクエリにエンゲージできる Redshift Spectrum ノードの数は、クラスター内のスライスの数に関連付けられます。
+ クラスターのサイズを変更すると、クラスターのローカルコンピューティングプロファイル、ストレージプロファイル、Amazon S3 データレイククエリのクエリ機能にメリットがあります。
+ Amazon Redshift クエリプランナーは、述語と集計を可能な限り Redshift Spectrum クエリレイヤーにプッシュします。
+ Amazon S3 から大量のデータが返されると、クラスターのリソースによって処理が制限されます。
+ Redshift Spectrum は大規模なリクエストを処理するように自動的にスケールするため、Redshift Spectrum レイヤーに処理をプッシュできるたびに全体的なパフォーマンスが向上します。