HOME
Lv020

「Lv020」の記事一覧

Structured Streamingで、Kafkaからの読み込みオフセットを「リセット」して最初から再処理したい場合の正しい手順はどれか。

ストリーミングの状態（どこまで読んだか）はチェックポイントに保存されているため、これを削除すること…

2026年3月8日

Delta Lakeの `VACUUM` コマンドを実行しても、ディスク容量が即座に解放されない場合の原因として考えられるものはどれか。

`VACUUM` をデフォルトで実行すると、実際には削除せずに対象ファイルを表示するだけのDRY RUNになること…

2026年3月8日

複数のジョブの間でデータの依存関係（ジョブAが終わったらジョブBを動かす）を管理するための推奨機能はどれか。

ジョブタスク内で「別のジョブを実行する」タスクを定義することで、ジョブ間の連鎖を構築できます。

2026年3月8日

Deltaテーブルのメタデータを詳細に確認し、現在のチェックポイントのバージョンやファイル数を知るためのコマンドはどれか。

DESCRIBE DETAILコマンドは、テーブルの物理的な統計情報やメタデータの詳細を表示します。

2026年3月8日

Unity Catalog上のデータに対する特定の権限（例: CREATE TABLE）を、別のユーザーに委任できる権限はどれか。

GRANT文にWITH GRANT OPTIONを付与することで、その権限を他のユーザーにも付与できる権利を委任できます。

2026年3月8日

Auto Loaderが新しい列を検知してスキーマを更新する際、既存の古いデータファイルはどうなるか。

スキーマ進化では、既存のデータファイルは変更されず、読み取り時に新しい列がNULLとして補完されます。

2026年3月8日

シルバー層のテーブルを、複数のダウンストリーム（ゴールド層や機械学習）で共有する際の利点はどれか。

共通のシルバー層を利用することで、異なる分析用途でも同じ定義のクリーンなデータを基にできます。

2026年3月8日

サーバーレスSQLウェアハウスにおいて、クエリの実行速度を向上させるために内部的に行われているキャッシュはどれか。

過去の結果の再利用（結果キャッシュ）とデータの高速読み込み（ディスクキャッシュ）の両方が行われます。

2026年3月8日

ストリーミング処理で「一度だけの実行」を保証し、リソース消費を最小化するために使われるTriggerはどれか。

Trigger.AvailableNow（旧Trigger.Onceの改良版）は、全増分データを処理して即座に終了します。

2026年3月8日

DLTで「APPLY CHANGES INTO」を使用したCDC処理において、削除フラグ（is_deletedなど）に基づいて行を物理削除する指定はどれか。

APPLY AS DELETE句を使用することで、ソースのフラグに基づいたターゲットの論理・物理削除を制御できます…

2026年3月8日