Partilhar via


MicrosoftLanguageTokenizer.MaxTokenLength Propriedade

Definição

O comprimento máximo do token. Tokens maiores do que o tamanho máximo são divididos. O comprimento máximo do token que pode ser usado é de 300 caracteres. Tokens com mais de 300 caracteres são primeiro divididos em tokens de comprimento 300 e, em seguida, cada um desses tokens é dividido com base no conjunto de comprimento máximo do token. O padrão é 255.

public int? MaxTokenLength { get; set; }
member this.MaxTokenLength : Nullable<int> with get, set
Public Property MaxTokenLength As Nullable(Of Integer)

Valor da propriedade

Aplica-se a