「Lv026」の記事一覧

DLTパイプラインのソースコード（ノートブック）内で `spark.read` を使用してCSVを読み込んだ場合、DLTの依存関係グラフ（Lineage）はどうなるか。

Delta Lakeの「Generated Columns（生成列）」を使用する主な利点はどれか。

「Inmon」型アーキテクチャ（企業データウェアハウスアプローチ）の特徴として適切なものはどれか。

PySparkで、`repartition()` を使用してデータを特定カラムでパーティショニングした後に書き込むと、どのようなディレクトリ構造になるか。

Databricks Jobsの「Notifications」設定で、ジョブ開始時（On start）に通知を送ることの潜在的なデメリットはどれか。

Auto Loaderの `cloudFiles.allowOverwrites` オプションを `true` に設定した場合の挙動はどれか。

Unity Catalogの「External Location」に対する権限を持つユーザーができる操作はどれか。

Structured Streamingで `flatMapGroupsWithState` を使用する際、ステートのエンコーディング形式（GroupStateTimeout）として選択できるものはどれか。

Adaptive Query Execution (AQE) が「Join Strategy」を動的に変更する条件として正しいものはどれか。

「Deletion Vectors」を有効にしたテーブルで `REORG TABLE APPLY (PURGE)` を実行する目的はどれか。