データの分析・可視化
蓄積されたデータに対して、SQLクエリを実行して必要な情報を抽出し、その結果をグラフやダッシュボードとして視覚的に表現するプロセスです。
「先月の売上上位10商品は何か」「特定のエラーが発生した時間帯と頻度はどうか」など、具体的な問いに対してデータから答えを導き出します。事前にレポートを用意するのではなく、必要なタイミングで自由にクエリを実行するアドホック分析が中心です。
分析結果は、数値やテーブルだけでは把握しにくい傾向やパターンも、グラフにすることで直感的に理解できるようになります。経営層やビジネス部門など、SQLを使わないメンバーにもデータに基づいた意思決定を促すために、可視化は重要な役割を果たします。
| 📝 アドホック分析とは |
|---|
| 事前に定義されたレポートではなく、その場の疑問や仮説に応じて自由にクエリを作成・実行する分析手法のことです。「ad hoc」はラテン語で「その場限りの」という意味で、定型レポートでは得られない柔軟な分析が可能です。AthenaとS3の組み合わせは、アドホック分析に特に適しています。 |
1. データサイエンティストの役割
データの分析は、主に**データサイエンティスト**や**データアナリスト**と呼ばれる専門職が担います。ビジネス上の課題に対して仮説を立て、SQLや統計手法、機械学習などを駆使してデータから知見を導き出すのがその役割です。一方、DevOpsエンジニアやデータエンジニアの役割は、データサイエンティストが分析を行うための環境(データ分析基盤)を構築・運用することです。具体的には、データの収集パイプラインの構築、ETL/ELTによるデータの変換、データレイクやデータウェアハウスの整備、AthenaやQuickSightが利用できる環境の構成などが該当します。
本セクションでは、このデータ分析基盤の構築・運用に焦点を当てて解説していきます。
2. BIツールとは
**BIツール**(Business Intelligence)とは、蓄積されたデータをグラフやダッシュボードとして可視化し、ビジネス上の意思決定を支援するためのソフトウェアです。SQLを書かなくても、ドラッグ&ドロップなどの直感的な操作でデータを分析・可視化できるため、経営層やビジネス部門のメンバーにも広く利用されています。代表的なBIツールには以下のようなものがあります。
- Tableauは高機能な可視化が特徴で、多様なデータソースに対応している
- Power BIはMicrosoft製のBIツールで、ExcelやAzureとの連携に強い
- LookerはGoogle Cloud製のBIツールで、データモデリング機能が特徴的である
- Grafanaはオープンソースのダッシュボードツールで、インフラ監視やログ分析に特に広く利用されている
AWSでは、次に紹介するAmazon QuickSightがBIツールに該当します。
3. 分析・可視化に関連するAWSサービス
### [Amazon Athena](/analytics/athena)S3上のデータに直接SQLクエリを実行できるサーバレスサービスです。サーバの構築や管理が不要で、標準的なSQLを使ってデータを分析できます。Parquet形式のデータと組み合わせることで、必要なカラムだけをスキャンし、高速かつ低コストにクエリを実行できます。ログ分析やアドホッククエリ、データ探索などに活用されます。
Amazon QuickSight
フルマネージドのBI(ビジネスインテリジェンス)サービスです。AthenaやS3、RDS、Redshiftなどさまざまなデータソースに接続し、インタラクティブなダッシュボードを作成できます。作成したダッシュボードはWebブラウザで共有でき、組織全体でデータドリブンな意思決定を推進できます。定期レポートの自動生成にも対応しています。