다음을 통해 공유


AddedToken 생성자

정의

오버로드

AddedToken()

새 AddedToken 개체를 만듭니다.

AddedToken(String, Boolean)

지정된 콘텐츠에서 새 AddedToken 개체를 만들어 특수 토큰인지 지정합니다. 특수 토큰은 기본적으로 정규화되지 않습니다.

AddedToken()

새 AddedToken 개체를 만듭니다.

public AddedToken ();
Public Sub New ()

적용 대상

AddedToken(String, Boolean)

지정된 콘텐츠에서 새 AddedToken 개체를 만들어 특수 토큰인지 지정합니다. 특수 토큰은 기본적으로 정규화되지 않습니다.

public AddedToken (string content, bool special = false);
new Microsoft.ML.Tokenizers.AddedToken : string * bool -> Microsoft.ML.Tokenizers.AddedToken
Public Sub New (content As String, Optional special As Boolean = false)

매개 변수

content
String

추가된 토큰의 내용입니다.

special
Boolean

이 토큰이 특별한지 여부를 나타냅니다.

적용 대상