WhiteSpace Clase
Definición
Importante
Parte de la información hace referencia a la versión preliminar del producto, que puede haberse modificado sustancialmente antes de lanzar la versión definitiva. Microsoft no otorga ninguna garantía, explícita o implícita, con respecto a la información proporcionada aquí.
Tokenizador previo que divide el texto en el límite de la palabra. La palabra es un conjunto de caracteres alfabéticos, numéricos y de subrayado.
public sealed class WhiteSpace : Microsoft.ML.Tokenizers.PreTokenizertype WhiteSpace = class
inherit PreTokenizerPublic NotInheritable Class WhiteSpace
Inherits PreTokenizer- Herencia
Constructores
| WhiteSpace() |
Tokenizador previo que divide el texto en el límite de la palabra. La palabra es un conjunto de caracteres alfabéticos, numéricos y de subrayado. |
Campos
| Instance |
Obtiene una instancia singleton del pre-tokenizer de WhiteSpace. |
Métodos
| PreTokenize(String) |
Divide la cadena especificada en varias subcadenas en el límite de la palabra, realizando un seguimiento de los desplazamientos de dichas subcadenas de la cadena original. |