你当前正在访问 Microsoft Azure Global Edition 技术文档网站。 如果需要访问由世纪互联运营的 Microsoft Azure 中国技术文档网站，请访问 https://docs.azure.cn。

StandardTokenizer 类

定义

命名空间:

Microsoft.Azure.Search.Models

程序集:

Microsoft.Azure.Search.Service.dll

包:

Microsoft.Azure.Search.Service v10.1.0

Source:

StandardTokenizer.cs

注意

This type is obsolete. Please use StandardTokenizerV2 instead.

按照 Unicode 文本分段规则划分文本。 此 tokenizer 是使用 Apache Lucene 实现的。 http://lucene.apache.org/core/4_10_3/analyzers-common/org/apache/lucene/analysis/standard/StandardTokenizer.html

[Newtonsoft.Json.JsonObject("#Microsoft.Azure.Search.StandardTokenizer")]
[System.Obsolete("This type is obsolete. Please use StandardTokenizerV2 instead.")]
public class StandardTokenizer : Microsoft.Azure.Search.Models.Tokenizer

[<Newtonsoft.Json.JsonObject("#Microsoft.Azure.Search.StandardTokenizer")>]
[<System.Obsolete("This type is obsolete. Please use StandardTokenizerV2 instead.")>]
type StandardTokenizer = class
    inherit Tokenizer

Public Class StandardTokenizer
Inherits Tokenizer

继承

Object

Tokenizer

StandardTokenizer

属性

Newtonsoft.Json.JsonObjectAttribute ObsoleteAttribute

构造函数

StandardTokenizer()	已过时. 初始化 StandardTokenizer 类的新实例。
StandardTokenizer(String, Nullable<Int32>)	已过时. 初始化 StandardTokenizer 类的新实例。

属性

MaxTokenLength	已过时. 获取或设置最大令牌长度。 默认值为 255。 拆分超过最大长度的令牌
Name	已过时. 获取或设置 tokenizer 的名称。 它必须仅包含字母、数字、空格、短划线或下划线，只能以字母数字字符开头和结尾，且最多包含 128 个字符。 (继承自 Tokenizer)

方法

Validate()

已过时. 验证 对象。