BpeDecoder クラス

定義

重要

一部の情報は、リリース前に大きく変更される可能性があるプレリリースされた製品に関するものです。 Microsoft は、ここに記載されている情報について、明示または黙示を問わず、一切保証しません。

すべてのトークンを結合し、単語の終わりを空白で識別するために使用されるサフィックスを置き換えることによって、元の BPE のデコードを許可します

public sealed class BpeDecoder : Microsoft.ML.Tokenizers.TokenizerDecoder

type BpeDecoder = class
    inherit TokenizerDecoder

Public NotInheritable Class BpeDecoder
Inherits TokenizerDecoder

BpeDecoder()	新しい Bpe デコーダーオブジェクトを構築します。
BpeDecoder(String)	新しい Bpe デコーダーオブジェクトを構築します。

元の BPE をデコードするには、すべてのトークンを結合し、単語の終わりを空白で識別するために使用されるサフィックスを置き換えます。