TokenizerResult.Ids プロパティ
定義
重要
一部の情報は、リリース前に大きく変更される可能性があるプレリリースされた製品に関するものです。 Microsoft は、ここに記載されている情報について、明示または黙示を問わず、一切保証しません。
トークン ID の一覧を取得します。 Id は、言語モデルへの主な入力です。 これらはトークン インデックスであり、LM が理解する数値表現です。
public System.Collections.Generic.IReadOnlyList<int> Ids { get; }
member this.Ids : System.Collections.Generic.IReadOnlyList<int>
Public ReadOnly Property Ids As IReadOnlyList(Of Integer)