dataset_utilities モジュール

azureml.dataprep と対話するためのユーティリティ メソッド。

関数

collect_usage_telemetry

collect_usage_telemetry(compute: Any, spark_context: Any, **kwargs: Any) -> None

パラメーター

名前 説明
compute
必須
spark_context
必須

convert_inputs

指定されたデータセットを追跡可能な定義に変換します。

convert_inputs(X: Any, y: Any, sample_weight: Any, X_valid: Any, y_valid: Any, sample_weight_valid: Any) -> Tuple[Any, Any, Any, Any, Any, Any]

パラメーター

名前 説明
X
必須

X を表すデータセット

y
必須

y を表すデータセット

sample_weight
必須

サンプルの重みを表すデータセット

X_valid
必須

X_valid を表すデータセット

y_valid
必須

y_valid を表すデータセット

sample_weight_valid
必須

検証サンプルの重みを表すデータセット

convert_inputs_dataset

指定されたデータセットを追跡可能な定義に変換します。

convert_inputs_dataset(*datasets: Any) -> Tuple[Any, ...]

パラメーター

名前 説明
datasets
必須

追跡可能な定義に変換するデータセット

ensure_saved

ensure_saved(workspace: Workspace, **kwargs: Any) -> None

パラメーター

名前 説明
workspace
必須

get_dataset_from_mltable_data_json

MLTable データ JSON からデータセットを取得します

get_dataset_from_mltable_data_json(ws: Workspace, mltable_data_json_obj: Dict[str, Any], data_label: MLTableDataLabel) -> AbstractDataset | None

パラメーター

名前 説明
ws
必須

データセットの取得元のワークスペース

mltable_data_json_obj
必須

mltable データ JSON オブジェクト

data_label
必須

mltable データ JSON から読み込むデータセットを示すラベル

get_datasets_from_data_json

MLTable データ JSON (URI を使用) または Dataprep JSON (データセット ID を使用) のいずれかのデータ JSON からデータセットを取得します

get_datasets_from_data_json(ws: Workspace, data_preparation_json: Dict[str, Any], data_labels: List[MLTableDataLabel]) -> Tuple[AbstractDataset | None, AbstractDataset | None, AbstractDataset | None]

パラメーター

名前 説明
ws
必須

データセットの取得元のワークスペース

data_preparation_json
必須

データ JSON オブジェクト

data_labels
必須

データ JSON から読み込むデータセットを示すラベルの一覧

get_datasets_from_dataprep_json

Dataprep JSON からデータセットを取得します (データセット ID を使用)

get_datasets_from_dataprep_json(ws: Workspace, dataprep_json: Dict[str, Any], data_labels: List[MLTableDataLabel]) -> Tuple[AbstractDataset | None, AbstractDataset | None, AbstractDataset | None]

パラメーター

名前 説明
ws
必須

データセットの取得元のワークスペース

data_preparation_json
必須

データ JSON オブジェクト

data_labels
必須

データ JSON から読み込むデータセットを示すラベルの一覧

dataprep_json
必須

get_datasets_from_mltable_data_json

MLTable データ JSON からデータセットを取得します (URI を使用)

get_datasets_from_mltable_data_json(ws: Workspace, mltable_data_json_obj: Dict[str, Any], data_labels: List[MLTableDataLabel]) -> Tuple[AbstractDataset | None, AbstractDataset | None, AbstractDataset | None]

パラメーター

名前 説明
ws
必須

データセットの取得元のワークスペース

data_preparation_json
必須

データ JSON オブジェクト

data_labels
必須

データ JSON から読み込むデータセットを示すラベルの一覧

mltable_data_json_obj
必須

get_datasets_json

dataprep json を取得します。

get_datasets_json(training_data: Any | None = None, validation_data: Any | None = None, test_data: Any | None = None) -> str | None

パラメーター

名前 説明
training_data

トレーニング データ。

規定値: None
validation_data

検証データ

規定値: None
test_data

テスト データ

規定値: None

戻り値

説明

データセットの辞書の JSON 文字列表現

is_dataset

指定されたオブジェクトがデータセットまたはデータセット定義であるかどうかを確認します。

is_dataset(dataset: Any) -> bool

パラメーター

名前 説明
dataset
必須

確認するオブジェクト