Tokenizer.DefaultTokenizerImpl(String, String) Método

Referência

Definição

Espaço de Nomes:: Microsoft.Bot.Builder.Dialogs.Choices

Assemblagem:: Microsoft.Bot.Builder.Dialogs.dll

Pacote:: Microsoft.Bot.Builder.Dialogs v4.22.7

Importante

Algumas informações dizem respeito a um produto pré-lançado que pode ser substancialmente modificado antes de ser lançado. A Microsoft não faz garantias, de forma expressa ou implícita, em relação à informação aqui apresentada.

Tokenizer simples que quebra em espaços e pontuação. A única normalização feita é em minúsculas.

public static System.Collections.Generic.List<Microsoft.Bot.Builder.Dialogs.Choices.Token> DefaultTokenizerImpl(string text, string locale = default);

static member DefaultTokenizerImpl : string * string -> System.Collections.Generic.List<Microsoft.Bot.Builder.Dialogs.Choices.Token>

Public Shared Function DefaultTokenizerImpl (text As String, Optional locale As String = Nothing) As List(Of Token)

Parâmetros

text: String

O texto de entrada.

locale: String

Opcional, identifica a região do texto de entrada.

Devoluções

List<Token>

Uma lista de tokens.

Observações

Esta é uma porta exata da implementação javaScript do algoritmo, exceto que aqui as funções de biblioteca .NET são utilizadas em vez das funções de ponto de código de cadeia JavaScript.

Aplica-se a

Partilhar via