BpeTrainer.SpecialTokens Propriedade
Definição
Importante
Algumas informações se referem a produtos de pré-lançamento que podem ser substancialmente modificados antes do lançamento. A Microsoft não oferece garantias, expressas ou implícitas, das informações aqui fornecidas.
Obtém a lista de tokens especiais que o modelo deve conhecer.
public System.Collections.Generic.IReadOnlyList<Microsoft.ML.Tokenizers.AddedToken>? SpecialTokens { get; }member this.SpecialTokens : System.Collections.Generic.IReadOnlyList<Microsoft.ML.Tokenizers.AddedToken>Public ReadOnly Property SpecialTokens As IReadOnlyList(Of AddedToken)