設計のポイント
Athenaを設計する際の主要な検討項目を以下にまとめます。
| 設計項目 | 検討内容 | 推奨・注意事項 |
|---|---|---|
| データ形式 | 保存フォーマットの選択 | Parquet形式を強く推奨。CSV/JSONは事前にParquetに変換 |
| パーティション | データの分割戦略 | 日付(year/month/day)での分割が一般的。クエリパターンに合わせて設計 |
| ファイルサイズ | 1ファイルあたりのサイズ | 128MB〜512MBが最適。小さすぎるファイルの大量生成を避ける |
| 圧縮 | 圧縮形式の選択 | Parquetの場合はSnappy圧縮(デフォルト)が推奨 |
| クエリ結果 | 結果の保存先管理 | S3ライフサイクルルールで古い結果を自動削除 |
| ワークグループ | チーム・用途ごとの管理 | ワークグループでクエリのコスト上限やアクセス制御を設定 |