Azure Data Factoryとは
Azure Data Factory(ADF)は、クラウドネイティブのETL/ELTおよびデータ統合サービスだ。オンプレミス・クラウド・SaaSなど90以上のソースからデータを取り込み、変換してデータウェアハウスや分析基盤に格納するパイプラインをGUIで構築できる。
セルフホステッド統合ランタイム(IR)を使うと、ファイアウォール内のオンプレミスデータソースにもアクセスできる。Azure SynapseのOrchestration機能にもData Factoryの技術が組み込まれており、実質的に同じパイプライン機能を提供する。
試験での問われ方
Data Factoryはデータ移動・変換のオーケストレーションツールであり、データの保存先ではない。『どのサービスでデータを動かすか』という問いの正解がADFになる。SynapseやDatabricksとの組み合わせで出題されることも多い。DP-900では『ETLパイプラインを作成するサービス』として問われる。
このサービスが登場する演習問題(3問)
- 【AZ-900】ある企業がAzureでPowerBIレポートに使用するデータパイプラインを構築しようとしている。複数のデータソース(Az…
- 【DP-900】ある企業のデータエンジニアが、複数のソースシステムからデータを抽出し、データウェアハウスへ格納するためのパイプラインを構…
- 【DP-900】ある保険会社が、保険金請求データ(Azure SQL Database)・顧客マスタ(オンプレミス Oracle)・外部…