HOME
Lv017

「Lv017」の記事一覧

「Databricks Runtime for Machine Learning (ML)」に含まれているが、標準Runtimeには含まれていない主な機能はどれか。

ML Runtimeには、PyTorch, TensorFlow, Scikit-learnなどの主要MLライブラリと、MLflow、AutoML機能が最適…

2026年3月8日

PySparkで、DataFrameのパーティション数を確認するコマンドはどれか。

DataFrame自体には直接パーティション数を返すメソッドがないため、下位のRDD APIにアクセスして `getNumP…

2026年3月8日

Databricks SQLの「Query Alert」機能で監視できる条件はどれか。

定期実行されるクエリの結果を監視し、例えば「売上がゼロになった」「エラー行数が100を超えた」などの条…

2026年3月8日

Databricks Jobsで「Task Value」を取得する際、キーが見つからなかった場合のデフォルト値を設定できるメソッドはどれか。

`dbutils.jobs.taskValues.get(taskKey, key, default, debugValue)` のように、第3引数でデフォルト値を…

2026年3月8日

「Data Vault 2.0」におけるハッシュキー（Hash Key）の使用目的はどれか。

ビジネスキーをハッシュ化して主キーとすることで、親テーブル（Hub）のキー生成を待たずに子テーブル（Li…

2026年3月8日

Unity Catalogの「Information Schema」をクエリすることで得られる情報はどれか。

`information_schema` カタログには、カレントユーザーがアクセス可能なすべてのデータベースオブジェクト…

2026年3月8日

DLTパイプラインで「cdc」を使用せず、手動で `MERGE` 文を書く場合に、更新順序を保証するために必要なものはどれか。

ソースデータに重複や順序の乱れがある場合、`WHEN MATCHED AND source.ts > target.ts` のように、より新…

2026年3月8日

「UDF (User Defined Function)」を使用する際、Catalyst Optimizerが最適化できない部分はどこか。

UDFの中身はSparkのオプティマイザにとって未知のコード（ブラックボックス）であるため、SQLのような述語…

2026年3月8日

Delta Lakeの `DESCRIBE HISTORY` コマンドで確認できる「isolationLevel」のデフォルト値（書き込み時）は通常どれか。

Delta Lake on Databricksのデフォルト分離レベルは「WriteSerializable」であり、データの整合性を保ちつ…

2026年3月8日

Kafkaソースのオプション `startingOffsets` に “earliest” を設定した場合の挙動はどれか。

`startingOffsets` は新規ストリーム開始時（チェックポイントが存在しない場合）の挙動を決定するもので…

2026年3月8日