Tokenizer.PreTokenizer Propriedade
Definição
Importante
Algumas informações se referem a produtos de pré-lançamento que podem ser substancialmente modificados antes do lançamento. A Microsoft não oferece garantias, expressas ou implícitas, das informações aqui fornecidas.
Obtém ou define o PreTokenizer usado pelo Criador de Token.
public Microsoft.ML.Tokenizers.PreTokenizer PreTokenizer { get; set; }member this.PreTokenizer : Microsoft.ML.Tokenizers.PreTokenizer with get, setPublic Property PreTokenizer As PreTokenizer