EnglishRoberta コンストラクター

定義

重要

一部の情報は、リリース前に大きく変更される可能性があるプレリリースされた製品に関するものです。 Microsoft は、ここに記載されている情報について、明示または黙示を問わず、一切保証しません。

EnglishRoberta(Stream, Stream, Stream)	英語の Robert モデルで使用するトークナイザーオブジェクトを構築します。
EnglishRoberta(String, String, String)	英語の Robert モデルで使用するトークナイザーオブジェクトを構築します。

英語の Robert モデルで使用するトークナイザーオブジェクトを構築します。

public EnglishRoberta (System.IO.Stream vocabularyStream, System.IO.Stream mergeStream, System.IO.Stream highestOccurrenceMappingStream);

new Microsoft.ML.Tokenizers.EnglishRoberta : System.IO.Stream * System.IO.Stream * System.IO.Stream -> Microsoft.ML.Tokenizers.EnglishRoberta

Public Sub New (vocabularyStream As Stream, mergeStream As Stream, highestOccurrenceMappingStream As Stream)

文字列キーとその ID のディクショナリを含む JSON ファイルのストリーム。

トークンのペアリストを含むファイルのストリーム。

元の GPT-2 モデル ID を高い出現ランクと値に再マップします。

英語の Robert モデルで使用するトークナイザーオブジェクトを構築します。

public EnglishRoberta (string vocabularyPath, string mergePath, string highestOccurrenceMappingPath);

new Microsoft.ML.Tokenizers.EnglishRoberta : string * string * string -> Microsoft.ML.Tokenizers.EnglishRoberta

Public Sub New (vocabularyPath As String, mergePath As String, highestOccurrenceMappingPath As String)

文字列キーのディクショナリとその ID を含む JSON ファイルパス。

トークンのペアリストを含むファイルパス。

元の GPT-2 モデル ID を高い出現ランクと値に再マップします。