Glue¶
はじめに¶
本サイトにつきまして、【IT技術の知見】はじめに - 俺の技術ノート をご認識のほど宜しくお願いいたします。
01. Glue とは¶
AWS が提供するマネージドな ETL サービスであり、ソースからデータを抽出して加工し、ターゲットに保存する。
02. セットアップ¶
コンソール画面の場合¶
▼ 設定項目と説明¶
| 設定項目 | 説明 | 補足 |
|---|---|---|
| ソース | 元データを管理するデータウェアハウスや DB を設定する。 | データウェアハウスのほうが、DB よりも保管形式の柔軟性が高い。 - https://www.topgate.co.jp/dwh-db-difference |
| ターゲット | 処理済データを管理するデータウェアハウスや DB を設定する。 |
高速処理¶
Apache Spark を使用して、大きなサイズのデータを高速に並列処理できる。