HOME
Databricks Certified Data Engineer Associate

「Databricks Certified Data Engineer Associate」の記事一覧

テーブルのスキーマを手動で変更せずに、新しいデータに含まれる列を自動で追加する書き込みモードはどれか。

mergeSchemaオプションをtrueに設定すると、既存のテーブルに新しい列が自動的にマージされます。

2026年3月8日

Unity Catalog上のデータに対するSQLクエリの実行履歴を確認できる「クエリ履歴」の最大保持期間はどれか。

Databricks SQLのクエリ履歴は、通常過去30日間の実行詳細とパフォーマンス統計を保持します。

2026年3月8日

タイムスタンプ型の列から、その日が「週の何日目か」を数値（1-7）で取得する関数はどれか。

dayofweek関数は、指定された日付の日曜日（1）から土曜日（7）までの数値を返します。

2026年3月8日

マイクロバッチ処理において、前回のバッチで未処理だったデータを次のバッチに含める仕組みはどれか。

チェックポイントに保存されたオフセット情報により、未処理のデータから正確に再開できます。

2026年3月8日

ゴールド層の要件として「履歴データの不変性」を保証するために推奨されるデータモデルはどれか。

SCD（ゆっくり変化するディメンション）タイプ0は、一度書き込まれたデータの更新を許可しないモデルです。

2026年3月8日

VACUUMコマンドを実行する際、デフォルトで保持される期間（リテンション期間）は何日間か。

Delta Lakeのデフォルトの保持期間は7日間であり、それより古い削除済みファイルが物理削除されます。

2026年3月8日

DLTにおいて、データ品質のルールを適用し、ルールに違反したレコード数をメトリクスとして記録する定義はどれか。

EXPECT制約を使用すると、データの検証を行い、その統計情報をイベントログに自動で記録します。

2026年3月8日

Unity Catalogにおいて、特定の行のデータへのアクセスを動的に制限するセキュリティ手法はどれか。

Row-level Filtersを使用すると、ユーザーの権限に基づいて表示される行を制限できます。

2026年3月8日

構造化された文字列から「正規表現」を用いて特定のパターンを抽出し、列として出力する関数はどれか。

regexp_extractは、指定したパターンに一致する部分文字列を正規表現グループとして抽出します。

2026年3月8日

ジョブが成功した際に、その結果を指定した外部URL（Slack等）に送信する仕組みはどれか。

Webhook通知を設定することで、ジョブの状態変化を外部アプリケーションにリアルタイムで通知できます。

2026年3月8日