DP-700 練習問題 14

Lakehouse1という名前のレイクハウスを含むFabricワークスペースがあります。 外部データソースには、それぞれ500GBのデータファイルがあります。新しいファイルが毎日追加されます。 変換を適用せずに、データをLakehouse1に取り込む必要があります。ソリューションは、以下の要件を満たす必要があります。 ・新しいファイルが追加されたときにプロセスをトリガーする。 ・最高のスループットを提供する。 データを取り込むために、どのタイプのアイテムを使用すべきですか？

正解: Eventstream

このシナリオの要件は、新しいファイルが追加されたときにトリガーされ、変換なしで大規模なデータを高スループットでレイクハウスに取り込むことです。Microsoft FabricのEventstreamは、これらの要件を満たすために設計されています。

• イベントドリブンな取り込み: Eventstreamは、Azure Blob Storageなどの外部ソースで新しいファイルが作成されるなどのイベントを検知し、データ取り込みプロセスを自動的にトリガーできます。
• 高スループット: Eventstreamは、リアルタイムのデータストリームを処理するために最適化されており、大規模なデータ量を効率的に処理するための高いスループットを提供します。
• 変換なしのルーティング: Eventstreamは、ソースから取得したデータを変換せずに、直接レイクハウスなどの宛先にルーティングする機能を持っています。

その他の選択肢の解説:

• Reflex: データイベントに基づいてアクション（例: 通知の送信）をトリガーすることに重点を置いていますが、大規模なファイルのデータ取り込みそのものを目的としたツールではありません。
• Notebook: ノートブックを使用してデータを取り込むことは可能ですが、ファイル追加をトリガーにするには追加のオーケストレーション（例: Data Factory パイプライン）が必要です。また、Eventstreamのような専用の取り込みサービスと比較して、最高のスループットを提供するとは限りません。
• KQL クエリセット: KQLデータベースに格納されたデータをクエリ、探索、分析するためのものであり、データを取り込むためのアイテムではありません。