Partager via


AddedToken Structure

Définition

Représente un jeton ajouté par l’utilisateur au-dessus du vocabulaire de modèle existant. AddedToken peut être configuré pour spécifier le comportement qu’il doit avoir dans différentes situations telles que :

  • Indique s’ils ne doivent correspondre qu’à un seul mot
  • Indique s’il faut inclure un espace blanc à gauche ou à droite
public struct AddedToken : IEquatable<Microsoft.ML.Tokenizers.AddedToken>
type AddedToken = struct
Public Structure AddedToken
Implements IEquatable(Of AddedToken)
Héritage
AddedToken
Implémente

Constructeurs

AddedToken()

Créez un objet AddedToken.

AddedToken(String, Boolean)

Créez un objet AddedToken à partir du contenu donné, en spécifiant s’il est destiné à être un jeton spécial. Les jetons spéciaux ne sont pas normalisés par défaut.

Propriétés

Content

Obtient ou définit le contenu du jeton ajouté

Méthodes

Equals(AddedToken)

Détermine si deux instances de jeton sont égales.

GetHashCode()

Retourne le code de hachage pour le jeton actuel.

Opérateurs

Implicit(String to AddedToken)

Définit une conversion implicite d’un objet string en AddedToken.

S’applique à