Bpe.UnknownToken プロパティ

リファレンス

定義

名前空間:: Microsoft.ML.Tokenizers

アセンブリ:: Microsoft.ML.Tokenizers.dll

パッケージ:: Microsoft.ML.Tokenizers v0.21.1

重要

一部の情報は、リリース前に大きく変更される可能性があるプレリリースされた製品に関するものです。 Microsoft は、ここに記載されている情報について、明示または黙示を問わず、一切保証しません。

不明なトークンを取得または設定します。不明な char が発生したときに使用される不明なトークン

public string? UnknownToken { get; set; }

member this.UnknownToken : string with get, set

Public Property UnknownToken As String

プロパティ値

String

適用対象