HOME
Lv010

「Lv010」の記事一覧

Databricks Certified Data Engineer Professional認定において、最も重視される能力はどれか。

Professionalレベルでは、単なる機能知識だけでなく、堅牢でスケーラブルなデータソリューションを構築す…

2026年3月8日

Databricksの「System Tables」にある `billing.usage` テーブルを使用して確認できる情報はどれか。

`billing.usage`テーブルをクエリすることで、ワークスペース、クラスター、ジョブごとのDBU消費量を集計…

2026年3月8日

「Identity Columns」（IDENTITY列）をテーブル定義に使用する主な目的はどれか。

RDBMSと同様に、`GENERATED ALWAYS AS IDENTITY`を使用することで、挿入される行に対してシステムが自動的…

2026年3月8日

「Lakehouse Federation」機能の主な目的はどれか。

Lakehouse Federationを使用すると、外部のデータソースに対してUnity Catalog内で外部テーブルとして定義…

2026年3月8日

Spark Connectアーキテクチャが解決する課題はどれか。

Spark Connectは、クライアントとSparkサーバー間の通信をgRPCで切り離すことで、IDEや薄いクライアントか…

2026年3月8日

DLTパイプラインにおいて、`dlt.read_stream` ではなく `dlt.read` を使用すべきケースはどれか。

静的なルックアップテーブルや、履歴を持たないマスタデータなど、毎回全体を再読み込みして最新化する必…

2026年3月8日

Structured Streamingのステートフル演算において、ステートの有効期限切れを処理するために定義する関数はどれか。

`flatMapGroupsWithState`または`mapGroupsWithState`を使用する際、タイムアウトを設定し、期限切れイベ…

2026年3月8日

Unity Catalogにおける「Storage Credential」と「External Location」の関係として正しいものはどれか。

Storage Credentialはクラウドの認証情報そのものであり、External Locationはその認証情報を使って「どこ…

2026年3月8日

Adaptive Query Execution (AQE) の「Dynamic Partition Pruning (DPP)」が機能する条件はどれか。

DPPは、結合の片側の結果に基づいて、もう片側のテーブル読み込み時に不要なパーティションを動的にスキッ…

2026年3月8日

Delta Lake 3.0で導入された「Universal Format（UniForm）」の機能はどれか。

UniFormを有効にすると、Delta Lakeの書き込み時にIcebergやHudiのメタデータも生成され、他のクライアン…

2026年3月8日