Lake Formationの主要機能
Lake Formationでは、まずS3上のデータ保存場所をデータレイクロケーションとして登録します。登録することで、そのS3パスに保存されたデータをLake Formationの管理下に置くことができます。
1. データレイクの登録
Lake Formationでは、まずS3上のデータ保存場所をデータレイクロケーションとして登録します。登録することで、そのS3パスに保存されたデータをLake Formationの管理下に置くことができます。
登録されたS3パスのデータに対するアクセスは、S3バケットポリシーやIAMポリシーではなく、Lake Formationの権限設定で制御されるようになります。
2. Glueデータカタログとの統合
Lake Formationは、Glueデータカタログの上位レイヤーとして機能します。Glueデータカタログで管理されているデータベースやテーブルに対して、Lake Formationから権限を付与・制御できます。
つまり、データの構造(スキーマ)はGlueデータカタログで管理し、データへのアクセス権限はLake Formationで管理する、という役割分担になります。
3. アクセス制御
Lake Formationのアクセス制御は、以下のレベルで設定できます。
| 制御レベル | 説明 | 例 |
|---|---|---|
| データベースレベル | データベース全体へのアクセスを制御 | sales_dbへの全アクセスを許可 |
| テーブルレベル | 特定のテーブルへのアクセスを制御 | sales_dataテーブルのみ読み取りを許可 |
| カラムレベル | テーブル内の特定カラムへのアクセスを制御 | 個人情報カラム(名前、電話番号)を非表示にする |
| 行レベル | 特定の条件に合致する行のみアクセスを許可 | region = '東京' の行のみ表示 |
4. 権限の付与モデル
Lake Formationでは、以下の権限を組み合わせてアクセスを制御します。
| 権限 | 説明 |
|---|---|
| SELECT | テーブルのデータを読み取る |
| INSERT | テーブルにデータを挿入する |
| DELETE | テーブルのデータを削除する |
| DESCRIBE | テーブルのメタデータ(スキーマ情報)を参照する |
| ALTER | テーブルの定義を変更する |
| DROP | テーブルを削除する |
| CREATE_TABLE | データベース内にテーブルを作成する |
| CREATE_DATABASE | データカタログにデータベースを作成する |