你当前正在访问 Microsoft Azure Global Edition 技术文档网站。如果需要访问由世纪互联运营的 Microsoft Azure 中国技术文档网站，请访问 https://docs.azure.cn。

ClassicTokenizer interface

适用于处理大多数欧洲语言文档的基于语法的 tokenizer。此 tokenizer 是使用 Apache Lucene 实现的。

属性

maxTokenLength	最大令牌长度。默认值为 255。拆分长度超过最大长度的令牌。可以使用的最大令牌长度为 300 个字符。
odatatype	多态鉴别器，它指定此对象可以的不同类型的

name	tokenizer 的名称。它只能包含字母、数字、空格、短划线或下划线，只能以字母数字字符开头和结尾，并且限制为 128 个字符。

最大令牌长度。默认值为 255。拆分长度超过最大长度的令牌。可以使用的最大令牌长度为 300 个字符。

maxTokenLength?: number

number

多态鉴别器，它指定此对象可以的不同类型的

odatatype: "#Microsoft.Azure.Search.ClassicTokenizer"

"#Microsoft.Azure.Search.ClassicTokenizer"

tokenizer 的名称。它只能包含字母、数字、空格、短划线或下划线，只能以字母数字字符开头和结尾，并且限制为 128 个字符。

name: string

string

继承自 LexicalTokenizer.name