TokenizerResult.Ids 属性

参考

定义

命名空间:: Microsoft.ML.Tokenizers

程序集:: Microsoft.ML.Tokenizers.dll

包:: Microsoft.ML.Tokenizers v0.20.1

重要

一些信息与预发行产品相关，相应产品在发行之前可能会进行重大修改。对于此处提供的信息，Microsoft 不作任何明示或暗示的担保。

获取令牌 ID 的列表。 ID 是语言模型的主要输入。它们是标记索引，即 LM 理解的数字表示形式。

public System.Collections.Generic.IReadOnlyList<int> Ids { get; }

member this.Ids : System.Collections.Generic.IReadOnlyList<int>

Public ReadOnly Property Ids As IReadOnlyList(Of Integer)

属性值

IReadOnlyList<Int32>

适用于