BpeTrainer.SpecialTokens Propriété
Définition
Important
Certaines informations portent sur la préversion du produit qui est susceptible d’être en grande partie modifiée avant sa publication. Microsoft exclut toute garantie, expresse ou implicite, concernant les informations fournies ici.
Obtient la liste des jetons spéciaux que le modèle doit connaître.
public System.Collections.Generic.IReadOnlyList<Microsoft.ML.Tokenizers.AddedToken>? SpecialTokens { get; }member this.SpecialTokens : System.Collections.Generic.IReadOnlyList<Microsoft.ML.Tokenizers.AddedToken>Public ReadOnly Property SpecialTokens As IReadOnlyList(Of AddedToken)