EnglishRoberta Constructores

Definición

Espacio de nombres:

Microsoft.ML.Tokenizers

Ensamblado:

Microsoft.ML.Tokenizers.dll

Paquete:

Microsoft.ML.Tokenizers v0.21.1

Sobrecargas

EnglishRoberta(Stream, Stream, Stream)	Construya el objeto tokenizer para usarlo con el modelo robert inglés.
EnglishRoberta(String, String, String)	Construya el objeto tokenizer para usarlo con el modelo robert inglés.

EnglishRoberta(Stream, Stream, Stream)

Construya el objeto tokenizer para usarlo con el modelo robert inglés.

public EnglishRoberta (System.IO.Stream vocabularyStream, System.IO.Stream mergeStream, System.IO.Stream highestOccurrenceMappingStream);

new Microsoft.ML.Tokenizers.EnglishRoberta : System.IO.Stream * System.IO.Stream * System.IO.Stream -> Microsoft.ML.Tokenizers.EnglishRoberta

Public Sub New (vocabularyStream As Stream, mergeStream As Stream, highestOccurrenceMappingStream As Stream)

Parámetros

vocabularyStream

Stream

Secuencia de un archivo JSON que contiene el diccionario de claves de cadena y sus identificadores.

mergeStream

Stream

Secuencia de un archivo que contiene la lista de pares de tokens.

highestOccurrenceMappingStream

Stream

Vuelva a asignar los identificadores de modelo GPT-2 originales a valores y rangos de repetición altos.

EnglishRoberta(String, String, String)

Construya el objeto tokenizer para usarlo con el modelo robert inglés.

public EnglishRoberta (string vocabularyPath, string mergePath, string highestOccurrenceMappingPath);

new Microsoft.ML.Tokenizers.EnglishRoberta : string * string * string -> Microsoft.ML.Tokenizers.EnglishRoberta

Public Sub New (vocabularyPath As String, mergePath As String, highestOccurrenceMappingPath As String)

Parámetros

vocabularyPath

String

Ruta de acceso del archivo JSON que contiene el diccionario de claves de cadena y sus identificadores.

mergePath

String

Ruta de acceso del archivo que contiene la lista de pares de tokens.

highestOccurrenceMappingPath

String

Vuelva a asignar los identificadores de modelo GPT-2 originales a valores y rangos de repetición altos.