AWS Glue

Identity

• AWS公式サイトによれば、AWS GlueはAWSが提供するサーバーレス型のデータ統合（ETL）サービスであり、2017年8月に一般提供が始まった。データソースの検出（クローリング）からデータ変換処理の実行までを一元的に扱う点を特徴とする。検証待ち AWS Glue | AWS

Capability

• AWS公式サイトによれば、AWS GlueはAWSが提供するサーバーレス型のデータ統合（ETL）サービスであり、2017年8月に一般提供が始まった。データソースの検出（クローリング）からデータ変換処理の実行までを一元的に扱う点を特徴とする。検証待ち AWS Glue | AWS
• AWS Glue DataBrewは、コードを書かずにデータのクレンジング・正規化を行うビジュアルデータ準備ツールで、AWS Glueファミリーの一部として提供される。250種類以上の組み込み変換をポイント＆クリックで適用でき、データ品質評価（プロファイリング）、変換手順の記録・自動化、データリネージの可視化機能を持つ。AWS公式はカスタム開発比で最大80%データ準備時間を短縮できるとするが、これは自社公表値であり第三者検証ではない。検証待ち AWS Glue DataBrewのビジュアルデータ準備機能
• AWS公式料金ページによれば、AWS GlueはETLジョブ・クローラー等の標準処理に1DPU時間あたり0.44米ドル（秒単位課金）の従量課金制で、常時稼働クラスターは不要。1DPUは4vCPU・16GBメモリ相当。非緊急バッチ向けFlex実行は1DPU時間あたり0.29米ドル。Data Catalogは月間100万オブジェクトまで無料、超過分は10万オブジェクトあたり1.00米ドル。実際の費用はワークロードとリージョンにより変動する。検証待ち AWS Glueの従量課金体系（DPU時間・Flex実行・Data Catalog無料枠）

Credibility

• 独立系レビュープラットフォームPeerSpot上のAWS Glueのレビューでは、サーバーレスETLサービスとしての導入実績が記録されている。検証待ち AWS Glue Reviews & Ratings
• AWS公式のTransport for NSW導入事例によれば、AWS Glueを含むクラウドネイティブサービスへの移行により年間データ統合コストを約80%削減し、データ取り込みジョブの構築・展開期間を数か月から3週間未満に短縮したと報告されている。検証待ち Transport for NSW Uses AWS Glue to Cut Integration Costs by 80% | AWS Case Study

Use Case

公開Evidence未整備

Constraints / Current Status

• AWS公式サイトによれば、AWS Glueはデータカタログ機能によりデータソースのスキーマを自動的に検出・管理する点が特徴で、変換処理の実行のみを担い、データソースの検出・カタログ化を主眼としない一般的なETLツールとは機能範囲が異なる。検証待ち AWS Glue Features | AWS

Key References

• AWS Glueを導入することでどのような効果が期待できますか？実際の導入事例はありますか？
• AWS Glueとはどのようなものですか？
• AWS Glue DataBrewとはどのような機能ですか？

Part of

• Amazon— AWS GlueはAmazonが提供するデータ統合サービスである。

Integrates With

• Amazon Redshift— AWS Glueは、変換・統合したデータをAmazon Redshiftへロードするデータパイプラインの構築に利用される。

Related

• AWS— AWS GlueはAWSのデータ統合サービス群の一つである。