TokenizerResult(String, String, IReadOnlyList<Split>, Boolean) Konstruktor
Definition
Wichtig
Einige Informationen beziehen sich auf Vorabversionen, die vor dem Release ggf. grundlegend überarbeitet werden. Microsoft übernimmt hinsichtlich der hier bereitgestellten Informationen keine Gewährleistungen, seien sie ausdrücklich oder konkludent.
Erstellen Sie ein neues Objekt des TokenizerResult-Objekts.
public TokenizerResult(string originalString, string normalizedString, System.Collections.Generic.IReadOnlyList<Microsoft.ML.Tokenizers.Split> splits, bool offsetsMappedToOriginalString);
new Microsoft.ML.Tokenizers.TokenizerResult : string * string * System.Collections.Generic.IReadOnlyList<Microsoft.ML.Tokenizers.Split> * bool -> Microsoft.ML.Tokenizers.TokenizerResult
Public Sub New (originalString As String, normalizedString As String, splits As IReadOnlyList(Of Split), offsetsMappedToOriginalString As Boolean)
Parameter
- originalString
- String
Die Liste der zusammenzuführenden Token.
- normalizedString
- String
Die Liste der zusammenzuführenden Token.
- splits
- IReadOnlyList<Split>
Die Liste der zusammenzuführenden Token.
- offsetsMappedToOriginalString
- Boolean
Geben Sie an, ob die Offsets der ursprünglichen Zeichenfolge oder der normalisierten Zeichenfolge zugeordnet sind.