AddedToken コンストラクター

定義

重要

一部の情報は、リリース前に大きく変更される可能性があるプレリリースされた製品に関するものです。 Microsoft は、ここに記載されている情報について、明示または黙示を問わず、一切保証しません。

AddedToken()	新しい AddedToken オブジェクトを作成します。
AddedToken(String, Boolean)	特定のコンテンツから新しい AddedToken オブジェクトを作成し、特殊なトークンを意図しているかどうかを指定します。既定では、特別なトークンは正規化されません。

新しい AddedToken オブジェクトを作成します。

public AddedToken ();

Public Sub New ()

特定のコンテンツから新しい AddedToken オブジェクトを作成し、特殊なトークンを意図しているかどうかを指定します。既定では、特別なトークンは正規化されません。

public AddedToken (string content, bool special = false);

new Microsoft.ML.Tokenizers.AddedToken : string * bool -> Microsoft.ML.Tokenizers.AddedToken

Public Sub New (content As String, Optional special As Boolean = false)

追加されたトークンの内容。

このトークンが特別かどうかを示します。