dataset_utilities モジュール
azureml.dataprep と対話するためのユーティリティ メソッド。
関数
collect_usage_telemetry
collect_usage_telemetry(compute: Any, spark_context: Any, **kwargs: Any) -> None
パラメーター
名前 | 説明 |
---|---|
compute
必須
|
|
spark_context
必須
|
|
convert_inputs
指定されたデータセットを追跡可能な定義に変換します。
convert_inputs(X: Any, y: Any, sample_weight: Any, X_valid: Any, y_valid: Any, sample_weight_valid: Any) -> Tuple[Any, Any, Any, Any, Any, Any]
パラメーター
名前 | 説明 |
---|---|
X
必須
|
X を表すデータセット |
y
必須
|
y を表すデータセット |
sample_weight
必須
|
サンプルの重みを表すデータセット |
X_valid
必須
|
X_valid を表すデータセット |
y_valid
必須
|
y_valid を表すデータセット |
sample_weight_valid
必須
|
検証サンプルの重みを表すデータセット |
convert_inputs_dataset
指定されたデータセットを追跡可能な定義に変換します。
convert_inputs_dataset(*datasets: Any) -> Tuple[Any, ...]
パラメーター
名前 | 説明 |
---|---|
datasets
必須
|
追跡可能な定義に変換するデータセット |
ensure_saved
ensure_saved(workspace: Workspace, **kwargs: Any) -> None
パラメーター
名前 | 説明 |
---|---|
workspace
必須
|
|
get_dataset_from_mltable_data_json
MLTable データ JSON からデータセットを取得します
get_dataset_from_mltable_data_json(ws: Workspace, mltable_data_json_obj: Dict[str, Any], data_label: MLTableDataLabel) -> AbstractDataset | None
パラメーター
名前 | 説明 |
---|---|
ws
必須
|
データセットの取得元のワークスペース |
mltable_data_json_obj
必須
|
mltable データ JSON オブジェクト |
data_label
必須
|
mltable データ JSON から読み込むデータセットを示すラベル |
get_datasets_from_data_json
MLTable データ JSON (URI を使用) または Dataprep JSON (データセット ID を使用) のいずれかのデータ JSON からデータセットを取得します
get_datasets_from_data_json(ws: Workspace, data_preparation_json: Dict[str, Any], data_labels: List[MLTableDataLabel]) -> Tuple[AbstractDataset | None, AbstractDataset | None, AbstractDataset | None]
パラメーター
名前 | 説明 |
---|---|
ws
必須
|
データセットの取得元のワークスペース |
data_preparation_json
必須
|
データ JSON オブジェクト |
data_labels
必須
|
データ JSON から読み込むデータセットを示すラベルの一覧 |
get_datasets_from_dataprep_json
Dataprep JSON からデータセットを取得します (データセット ID を使用)
get_datasets_from_dataprep_json(ws: Workspace, dataprep_json: Dict[str, Any], data_labels: List[MLTableDataLabel]) -> Tuple[AbstractDataset | None, AbstractDataset | None, AbstractDataset | None]
パラメーター
名前 | 説明 |
---|---|
ws
必須
|
データセットの取得元のワークスペース |
data_preparation_json
必須
|
データ JSON オブジェクト |
data_labels
必須
|
データ JSON から読み込むデータセットを示すラベルの一覧 |
dataprep_json
必須
|
|
get_datasets_from_mltable_data_json
MLTable データ JSON からデータセットを取得します (URI を使用)
get_datasets_from_mltable_data_json(ws: Workspace, mltable_data_json_obj: Dict[str, Any], data_labels: List[MLTableDataLabel]) -> Tuple[AbstractDataset | None, AbstractDataset | None, AbstractDataset | None]
パラメーター
名前 | 説明 |
---|---|
ws
必須
|
データセットの取得元のワークスペース |
data_preparation_json
必須
|
データ JSON オブジェクト |
data_labels
必須
|
データ JSON から読み込むデータセットを示すラベルの一覧 |
mltable_data_json_obj
必須
|
|
get_datasets_json
dataprep json を取得します。
get_datasets_json(training_data: Any | None = None, validation_data: Any | None = None, test_data: Any | None = None) -> str | None
パラメーター
名前 | 説明 |
---|---|
training_data
|
トレーニング データ。 規定値: None
|
validation_data
|
検証データ 規定値: None
|
test_data
|
テスト データ 規定値: None
|
戻り値
型 | 説明 |
---|---|
データセットの辞書の JSON 文字列表現 |
is_dataset
指定されたオブジェクトがデータセットまたはデータセット定義であるかどうかを確認します。
is_dataset(dataset: Any) -> bool
パラメーター
名前 | 説明 |
---|---|
dataset
必須
|
確認するオブジェクト |