AddedToken 생성자
정의
중요
일부 정보는 릴리스되기 전에 상당 부분 수정될 수 있는 시험판 제품과 관련이 있습니다. Microsoft는 여기에 제공된 정보에 대해 어떠한 명시적이거나 묵시적인 보증도 하지 않습니다.
오버로드
AddedToken() |
새 AddedToken 개체를 만듭니다. |
AddedToken(String, Boolean) |
지정된 콘텐츠에서 새 AddedToken 개체를 만들어 특수 토큰인지 지정합니다. 특수 토큰은 기본적으로 정규화되지 않습니다. |
AddedToken()
새 AddedToken 개체를 만듭니다.
public AddedToken ();
Public Sub New ()
적용 대상
AddedToken(String, Boolean)
지정된 콘텐츠에서 새 AddedToken 개체를 만들어 특수 토큰인지 지정합니다. 특수 토큰은 기본적으로 정규화되지 않습니다.
public AddedToken (string content, bool special = false);
new Microsoft.ML.Tokenizers.AddedToken : string * bool -> Microsoft.ML.Tokenizers.AddedToken
Public Sub New (content As String, Optional special As Boolean = false)
매개 변수
- content
- String
추가된 토큰의 내용입니다.
- special
- Boolean
이 토큰이 특별한지 여부를 나타냅니다.