Compartilhar via


Token(Int32, String, ValueTuple<Int32,Int32>) Construtor

Definição

Construa um novo objeto Token usando o valor do token, a ID e o mapeamento de deslocamento para a cadeia de caracteres original.

public Token (int id, string value, (int, int) offset);
new Microsoft.ML.Tokenizers.Token : int * string * ValueTuple<int, int> -> Microsoft.ML.Tokenizers.Token
Public Sub New (id As Integer, value As String, offset As ValueTuple(Of Integer, Integer))

Parâmetros

id
Int32

O valor da ID associado ao token.

value
String

O valor da cadeia de caracteres de token.

offset
ValueTuple<Int32,Int32>

O mapeamento de deslocamento para a cadeia de caracteres original.

Aplica-se a