Split 클래스

정의

중요

일부 정보는 릴리스되기 전에 상당 부분 수정될 수 있는 시험판 제품과 관련이 있습니다. Microsoft는 여기에 제공된 정보에 대해 어떠한 명시적이거나 묵시적인 보증도 하지 않습니다.

이 분할에는 기본 분할 토큰과 원래 문자열의 오프셋이 포함됩니다. 이러한 오프셋은 참조에 original 있습니다. 또한 현재 분할에 연결된 모든 Token 항목이 포함되어 있습니다.

public sealed class Split : IEquatable<Microsoft.ML.Tokenizers.Split>

type Split = class
    interface IEquatable<Split>

Public NotInheritable Class Split
Implements IEquatable(Of Split)

토큰 및 오프셋을 사용하여 Split 개체 만들기

Offset	원래 문자열에 대한 오프셋 매핑을 반환합니다.
TokenString	기본 분할 토큰을 가져옵니다. 각 SubString은 토큰으로 표시되며, 결국에는 원래 입력 문자열의 다양한 부분을 나타내는 많은 SubString을 수행할 수 있습니다.

현재 Split 개체가 다른 Split 개체와 같은지 여부를 나타냅니다.