Bpe.UnknownToken 속성

참조

정의

네임스페이스:: Microsoft.ML.Tokenizers

어셈블리:: Microsoft.ML.Tokenizers.dll

패키지:: Microsoft.ML.Tokenizers v0.21.1

중요

일부 정보는 릴리스되기 전에 상당 부분 수정될 수 있는 시험판 제품과 관련이 있습니다. Microsoft는 여기에 제공된 정보에 대해 어떠한 명시적이거나 묵시적인 보증도 하지 않습니다.

알 수 없는 토큰을 가져오거나 설정합니다. 알 수 없는 문자를 발견할 때 사용할 알 수 없는 토큰

public string? UnknownToken { get; set; }

member this.UnknownToken : string with get, set

Public Property UnknownToken As String

속성 값

String

적용 대상