データ エンジニアは、遅れて到着する重複レコードが表示される可能性があるパイプラインを構成しています。
バッチ内のレコードの重複排除に加えて、デルタ テーブルに挿入されるときに、データ エンジニアが以前に処理されたレコードに対してデータの重複排除を実行できるアプローチは次のどれですか。

• A. 各バッチが完了した後、Delta テーブルを VACUUM します。
• B. 一意のキーに対して一致する条件を使用して挿入のみのマージを実行します。
• C. 一意のキーで完全外部結合を実行し、既存のデータを上書きします。
• D. Delta Lake スキーマの適用を利用して、重複レコードを防止します。
• E. 構成 delta.deduplicate = true を設定します。

データチームは、カーディナリティの高い列を持つ、既存の大規模で急成長中のテーブル「orders」の最適化に取り組んでいます。このテーブルでは、データの偏りが大きく、頻繁な同時書き込みが必要になります。チームは、「user_id」、「event_timestamp」、「product_id」列が分析クエリやフィルターで頻繁に使用されていることに気づきました。ただし、これらのキーは、将来、ビジネス要件の変化により変更される可能性があります。即時のデータスキップ、時間の経過に伴う増分管理、そして柔軟性を実現するために、テーブルを最適化するには、どのようなパーティション分割戦略を選択すべきでしょうか？

• A. OPTIMIZE 命令でテーブルを Z 順序付けします。ZORDER BY (user_id, product_id, event_timestamp)
• B. テーブルを分割した後、Zオーダーを使用します: OPTIMIZE orders ZORDER BY (user_id, product_id) WHERE event_timestamp = current date () - 1 DAY
• C. テーブルをクラスタ化します: ALTER TABLE orders CLUSTER BY user_id, product_id, event_timestamp
• D. テーブルをパーティション分割します: ALTER TABLE orders PARTITION BY user_id, product_id, event_timestamp

DLT パイプラインには、次のストリーミング テーブルが含まれます。
Raw_lot は、心拍数追跡デバイスから生のデバイス測定データを取り込みます。
Bpm_stats は、raw_lot からの BPM 測定値に基づいてユーザー統計を段階的に計算します。
データ エンジニアは、パイプラインの更新が実行されたときにダウンストリーム テーブルを再計算しながら、raw_iot テーブルで手動で削除または更新されたレコードを保持できるように、このパイプラインをどのように構成できますか。

• A. bpm_statsのskipChangeCommitsフラグをtrueに設定する
• B. raw_iot のパイプライン、リセット、許可プロパティを false に設定します。
• C. bpm_stats のパイプライン、リセット、許可プロパティを false に設定します。
• D. SkipChangeCommitsフラグをtrueに設定する raw_lot

2人のデータエンジニアが、別々のブランチで同じDatabricksノートブックに取り組んでいます。両者ともコードの同じセクションを編集しています。一方がDatabricks GitフォルダーUIを使用して、もう一方のブランチを自分のブランチにマージしようとしたところ、そのノートブックファイルでマージの競合が発生しました。UIは競合をハイライト表示し、解決方法を提示します。データエンジニアは、Databricks Gitフォルダーを使用してこのマージの競合をどのように解決すればよいでしょうか？

• A. Databricks ワークスペース UI を介して競合しているノートブック ファイルを削除し、削除をコミットして、新しいコミットでノートブックを最初から再作成し、競合を完全に回避します。
• B. Git フォルダー UI を使用してノートブック ファイルを手動で編集し、両方のバージョンから必要な行を選択し、競合マーカーを削除して、競合を解決済みとしてマークします。
• C. クラスターの Web ターミナルで Git CLI を使用して、競合したマージを強制的にプッシュし (git push -force)、リモート ブランチをローカル バージョンで上書きして変更を破棄します。
• D. マージを中止し、すべてのローカル変更を破棄して、競合するコードを確認せずにマージ操作を再試行します。